JP5356360B2 - 無線通信システムにおけるオーディオおよびビデオデータの同期 - Google Patents

無線通信システムにおけるオーディオおよびビデオデータの同期 Download PDF

Info

Publication number
JP5356360B2
JP5356360B2 JP2010265208A JP2010265208A JP5356360B2 JP 5356360 B2 JP5356360 B2 JP 5356360B2 JP 2010265208 A JP2010265208 A JP 2010265208A JP 2010265208 A JP2010265208 A JP 2010265208A JP 5356360 B2 JP5356360 B2 JP 5356360B2
Authority
JP
Japan
Prior art keywords
video
audio
data
communication channel
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010265208A
Other languages
English (en)
Other versions
JP2011142616A (ja
Inventor
ハリナス・ガルダドリ
フーム・サジェトン
サンジブ・ナンダ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2011142616A publication Critical patent/JP2011142616A/ja
Application granted granted Critical
Publication of JP5356360B2 publication Critical patent/JP5356360B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/06Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/36Flow control; Congestion control by determining packet size, e.g. maximum transfer unit [MTU]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1101Session protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/764Media network packet handling at the destination 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04Protocols for data compression, e.g. ROHC
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/166IP fragmentation; TCP segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/321Interlayer communication protocols or service data unit [SDU] definitions; Interfaces between layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40Network security protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6156Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6181Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64707Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless for transferring content from a first network to a second network, e.g. between IP and wireless
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/06Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • H04W28/065Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information using assembly or disassembly of packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/04Wireless resource allocation
    • H04W72/044Wireless resource allocation based on the type of the allocated resource
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18Service support devices; Network management devices
    • H04W88/181Transcoding devices; Rate adaptation devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22Parsing or analysis of headers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/12Wireless traffic scheduling
    • H04W72/1263Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W80/00Wireless network protocols or protocol adaptations to wireless operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/04Large scale networks; Deep hierarchical networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Communication Control (AREA)
  • Telephone Function (AREA)
  • Alarm Systems (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Small-Scale Networks (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)

Description

優先権主張
(米国特許法119条のもとでの優先権の主張)
本特許出願は、本譲受人に譲渡され、参照してここに明示的に組み込まれる、2004年5月13日に出願された「CDMA物理層プロダクトによって搬送されるマルチメディアパケット(Multimedia Packets Carried by CDMA Physical Layer Products)」と題される米国特許仮出願第60/571,673号の優先権を主張する。
(係属中関連特許出願の参照)
本特許出願は、次の同時係属中の米国特許出願に関連する:
同時に出願され、本譲受人に譲渡され、参照してここに全体として明示的に組み込まれる、代理人整理番号030166UIの「通信チャネル上での情報の配信(Delivery Of Information Over A Communication Channel)」;
同時に出願され、本譲受人に譲渡され、参照してここに全体として明示的に組み込まれる、代理人整理番号030166U2の「通信システムのチャネルへの情報の割り当てのための方法および装置(Method And Apparatus For Allocation Of Information To Channels Of A Communication System)」;そして
同時に出願され、本譲受人に譲渡され、参照してここに全体として明示的に組み込まれる、代理人整理番号030166U3の「無線通信システム上で送信されるマルチメディアデータのヘッダ圧縮 (Header Compression Of Multimedia Data Transmitted Over A Wireless Communication System)」。
背景
(分野)
本発明は、概して無線通信システム上での情報の配信に関し、より具体的には、無線通信システム上で送信されるオーディオおよびビデオデータの同期に関係する。
(背景)
様々な通信ネットワーク上でオーディオまたはビデオデータのようなマルチメディアあるいはリアルタイムデータを送信するための様々な技術が開発されてきている。そのような1つの技術は、リアルタイムトランスポートプロトコル(real-time transport protocol)(RTP)である。RTPは、マルチキャスト(multicast)またはユニキャスト(unicast)のネットワークサービス上でリアルタイムデータを送信するアプリケーションに適している終端間ネットワーク伝送機能(end-to-end network transport functions)を提供する。RTPはリソース予約(resource reservation)に対応せず、リアルタイムサービス用のサービスの質(quality-of-service)を保証しない。大きなマルチキャストネットワークに拡張可能な方法でデータ配信のモニタリングを可能としそして最小限の制御および識別機能性(minimal control and identification functionality)を提供するコントロールプロトコル(RTCP)によって、データ伝送は拡張される。RTPとRTCPは、基礎をなすトランスポートおよびネットワークの層に依存しないように設計される。プロトコルは、RTPレベルのトランスレータおよびミキサーの使用をサポートする。RTPに関する更なる詳細は、ここに参照することによりその全体が組みこまれる、「RTP:リアルタイムアプリケーション用のトランスポートプロトコル(RTP:A Transport Protocol for Real-Time Applications)」(H.Schulzrinne[コロンビア大学]、S.Casner[パケット設計]、R.Frederick[ブルーコートシステムズ社]、V.Jacobson[パケット設計]、RFC−3550標準規格草案、インターネットエンジニアリング ステアリング グループ、2003年7月)の中で見つけられることができる。
RTPの側面を説明する例は、RTPが音声通信用のインターネットのインターネットプロトコル(IP)サービスのトップに維持されている電話会議である。割り当てメカニズムを通して、会議の発信元はマルチキャストグループアドレスおよびペアのポートを得る。1つのポートはオーディオデータ用に使用され、そして、他方はコントロール(RTCP)パケット用に使用される。このアドレスとポート情報は対象とする参加者に配布される。各会議参加者によって使用される電話会議アプリケーションは、小さなパーティション、例えば20ms持続期間のパーティションで、オーディオデータを送信する。オーディオデータの各パーティションはRTPヘッダに先行され、そして、結合されたRTPヘッダおよびデータは、UDPパケットにカプセル化される。RTPヘッダは、データに関する情報を含み、例えば、それは、PCM、ADPCMあるいはLPCのような、どのタイプのオーディオ符号化が各パケットに含まれているか、RTPパケットが与えられる予定の時間Time Stamp(タイムスタンプ)(TS)、失われた/複製のパケットを検知するために使用されることができるパケットのシーケンシアル番号Sequence Number(シーケンス番号)(SN)、等を示す。これは、送信者が、例えば、低帯域幅リンクを通して接続される新しい参加者に対応するために、あるいはネットワーク混雑状態の指示に対応するために、会議中に使用される符号化のタイプを変更することを可能にする。
RTP標準規格に従って、もしオーディオおよびビデオメディアの両方がRTP会議の中で使用される場合、それらは別々のRTPセッションとして送信される。すなわち、別々のRTPおよびRTCPパケットが、2つの異なるUDPポートペアおよび/またはマルチキャストアドレスを使用して、各メディアに対し送信される。セッションが関連付けられることができるように、両方のセッションに参加しているユーザが両方のRTCPパケットの中で同じ名前を使用しなければならないこと以外は、オーディオおよびビデオセッション間でRTPレベルでの直接の結合はない。
別々のRTPセッションとしてオーディオとビデオを送信する動機は、会議中の何人かの参加者に、もし彼らが選択する場合は、ただ1つのメディアを受け取ることを可能にすることである。分離にもかかわらず、発信元のオーディオおよびビデオの同期のとられた再生は、両方のセッションのRTP/RTCPパケットで搬送されるタイミング情報を使用して達成されることができる。
インターネットのようなパケットネットワークは、時々、パケットを失う、あるいは再整理するかもしれない。更に、個々のパケットは、それぞれの伝送時間において不定量の遅れを経験するかもしれない。これらの障害に対処するために、RTPヘッダは、受信側が送信元によって生成されたタイミングを再構築することを可能にするタイミング情報およびシーケンス番号を含んでいる。このタイミング再構築は、セッションのRTPパケットの各送信元に対し別々に行なわれる。
たとえRTPヘッダがタイミング情報およびシーケンス番号を含んでいても、オーディオとビデオが別々のRTPストリームで配信されるので、ストリーム間には、リップシンク(lip-synch)あるいはAVシンク(AV-synch)とも呼ばれる、潜在的なタイムスリップ(time slip)がある。受信側でのアプリケーションは、オーディオとビデオを与える前に、これらのストリームの再同期をとらなければならないだろう。更に、オーディオとビデオのようなRTPストリームが無線ネットワーク上で送信されるアプリケーションにおいては、パケットが失われるかもしれない可能性が増加し、そのために、ストリームの再同期をより困難にしている。
従って、ネットワーク上で送信されるオーディオおよびビデオRTPストリームの同期を改善するための技術的必要性がある。
ここに開示される実施形態は、データストリームが同期されるように、ネットワーク上、例えば無線あるいはIPネットワーク上、で送信されるオーディオビデオストリームのようなデータストリームを符号化することにより、上述の必要性に対応する。例えば、オーディオの全フレーム(an entire frame of audio)およびビデオの全フレーム(an entire frame of video)は、受信側中のアプリケーションによって、オーディオおよびビデオフレームを与えるのに必要とされるフレーム期間内に送信される。例えば、データストリーム同期装置(a data stream synchronizer)は、第1符号化されたデータストリーム(a first encoded data stream)を受け取りそしてデコードされた第1データストリーム(a decoded first data stream)を出力するように構成された(configured)第1デコーダを含んでよい、なおここでは、第1符号化されたデータストリームは、情報間隔の間(during an information interval)、第1ビットレート(a first bit rate)を有する。同期をとられたデータはまた、第2符号化されたデータストリームを受け取りそしてデコードされた第2データストリームを出力するように構成された第2デコーダを含んでもよい、なおここでは、第2符号化されたデータストリームは、情報間隔の間、第2ビットレートを有する。第1バッファは、少なくとも1情報間隔の間、デコードされた第1データストリーム(the first decoded data stream)を蓄積し、そして間隔期間毎にデコードされた第1データストリームのフレームを出力するように構成されている。第2バッファは、少なくとも1情報間隔の間、デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力するように構成されている。それから、デコードされた第1データストリームのフレームおよびデコードされた第2データストリームのフレームを受け取るように構成された結合器(a combiner)が、第1および第2のデコードされたデータストリームの同期をとられたフレームを出力する。第1符号化データストリームはビデオデータであり得、そして第2符号化データストリームはオーディオデータであり得る。
この技術の一面は、オーディオおよびビデオRTPストリームを受け取ることと、そして、RTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める(that occupy the same period, or less, as the video frame rate)通信チャネルパケットに割り当てることと、を含む。また、RTPオーディオデータの全フレームは、オーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てられる。ビデオとオーディオの通信チャネルパケットは、同時に送信される。RTPストリームを受け取ることおよび割り当てることは、遠隔局。又は基地局において実行されることができる。
別の面は、オーディオおよびビデオデータを含んでいる通信チャネルパケットを受け取ることである。オーディオおよびビデオデータをデコードし、そしてデータを、オーディオおよびビデオデータのフレーム期間と等しい期間、蓄積する。フレーム期間の終わりに、ビデオのフレームとオーディオのフレームとは結合される。オーディオフレームおよびビデオフレームが同時に送信され、そして各伝送がフレーム期間内に生じるので、オーディオおよびビデオのフレームは同期がとられる。デコードすることおよび蓄積することは、遠隔局または基地局で実行されることができる。
図1は、本発明に従い構成された通信システムの部分の説明図である。 図2は、図1のシステムにおける無線ネットワーク上でパケットデータを配信するための例示的なパケットデータネットワークおよび様々なエアインタフェースオプションを示すブロック図である。 図3は、無線通信チャネル上での別々のRTPストリームの伝送のための従来の技術における同期問題を示すチャートである。 図4は、本発明に従う、無線通信チャネル上での別々のRTPストリームの伝送のための技術を示すチャートである。 図5は、通信チャネルパケットを受け取るように構成された無線オーディオ/ビデオ受信機の一部分のブロック図である。 図6は、通信チャネルパケットを送信するように構成された無線オーディオ/ビデオ送信機の一部分のブロック図である。 図7は、無線通信リンク上での独立したRTPストリームの伝送のフローチャートである。 図8は、無線通信チャネル上での受信オーディオおよびビデオデータのフローチャートである。 図9は、本発明の例示的な実施形態に従って構成された、無線通信デバイスあるいは移動局(MS)のブロック図である。
詳細な説明
ここで使用されている用語「例示的な(exemplary)」は、「例(example)、実例(instance)、または例証(illustration)である」を意味している。「例示的な」としてここで説明されるどの実施形態も、他の実施形態より好ましいまたは有利であるとして必ずしも解釈されるべきではない。
ここで使用されている用語「ストリーミング(streaming)」は、対話型のユニキャストまたはブロードキャストアプリケーションにおける専用または共有チャネル上での本質的に連続するマルチメディアデータ、例えば、オーディオ、スピーチまたはビデオ情報など、のリアルタイム配信(real time delivery)を意味する。ここで使用されるビデオ用のフレーズ「マルチメディアフレーム(multimedia frame)」は、デコ-ディング後に、ディスプレイデバイス上で表示される/描画されることができるビデオフレームを意味する。ビデオフレームはさらに、独立してデコード可能な単位(independently decodable units)に分割されることができる。ビデオ専門用語では、これらは「スライス(slices)」と呼ばれる。オーディオとスピーチの場合には、ここで使用される用語「マルチメディアフレーム」は、スピーチまたはオーディオが伝送および受信機でのデコーディングのために圧縮されるタイムウィンドウ(a time window)中の情報を意味する。ここで使用されるフレーズ「情報単位間隔(information unit interval)」は、上記に記述されたマルチメディアフレームの時間期間(the time duration)を表わす。例えば、ビデオの場合には、情報単位間隔は、10フレーム/秒ビデオの場合に100ミリセカンドである。更に、1例として、スピーチの場合には、情報単位間隔は、cdma2000、GSM(登録商標)およびWCDMAにおいて、典型的に20ミリセカンドである。この説明から、オーディオ/スピーチフレームは通常、独立してデコード可能な単位に更には分割されず、そしてビデオフレームは、通常、独立してデコード可能なスライスに分割される、ということが明らかである。フレーズ「マルチメディアフレーム」、「情報単位間隔」、等が、ビデオ、オーディオおよびスピーチのマルチメディアデータを参照するときは、コンテキストから明らかである。
1セットの固定ビットレート通信チャネル上で送信されるRTPストリームを同期させるための技術が説明される。本技術は、RTPストリームの中で送信される情報単位をデータパケットにパーティションで区切ること(partitioning)を含んでおり、ここではデータパケットのサイズは、通信チャネルの物理層データパケットサイズと適合する(match)ように選択される。例えば、互いに同期がとられるオーディオおよびビデオデータは符号化され得る。エンコーダは、それがデータを通信チャネルの利用可能な物理層パケットサイズに適合するサイズに符号化するように、制約され得る。RTPストリームが同時にまたは連続的に送信されるが、タイムフレーム内でオーディオおよびビデオパケットが同期して与えられることが必要とされるので、データパケットサイズを1以上の利用可能な物理層パケットサイズに適合するように制約することによって、同期がとられている複数のRTMストリームを送信することをサポートする。例えば、もしオーディオおよびビデオRTPストリームが送信され、そしてデータパケットが、それらのサイズが利用可能な物理層パケットと適合するように、抑制される場合、そのとき、オーディオおよびビデオデータはディスプレイ時間内に送信されそして同期をとられる。上記の(係属中関連特許出願の参照)においてリストされた同時に係属中の出願の中で説明されているように、RTPストリームを表わすために必要とされるデータの量が変わるとき、異なる物理層パケットサイズの選択をとおして通信チャネル容量は変わる。
RTPストリームのような情報単位の例は、可変ビットレートデータストリーム、マルチメディアデータ、ビデオデータ、およびオーディオデータを含む。情報単位は、コンスタントな繰返しレートで発生し得る。例えば、情報単位は、オーディオ/ビデオデータのフレームであってよい。
異なる国内および国際標準規格は、様々なエアインタフェース(air interface)をサポートするために確立されてきており、例えば、先進移動電話サービス(Advanced Mobile Phone Service)(AMPS)、汎欧州デジタル移動電話方式(Global System for Mobile)(GSM)、汎用パケット無線システム(General Packet Radio Service)(GPRS)、拡張データGSM環境(Enhanced Data GSM Environment)(EDGE)、暫定標準規格95(IS−95)およびその派生、IS−95A、IS−95B、ANSI J−STD−008(ここでは集合的にIS−95としばしば呼ばれる)、そして新生の高データレートシステム、例えば、cdma 2000、ユニバーサル移動体通信サービス(Universal Mobile Telecommunications Service)(UMTS)、広帯域CDMA(wideband CDMA)、WCDMAなど、を含む。これらの標準規格は、米国電気通信工業会(TIA)、第三世代パートナーシッププロジェクト(3GPP)、欧州電気通信標準協会(ETSI)および他の良く知られた標準規格団体によって広められている。
図1は、本発明に従って構成された通信システム100を示す。通信システム100は、インフラストラクチャ(infrastructure)101、複数の無線通信デバイス(wireless communication devices)(WCD)104および105、そして地上通信線通信装置(landline communication devices)122および124を含んでいる。WCDはまた移動局(mobile stations)(MS)あるいはモバイル(mobiles)と呼ばれるであろう。一般に、WCDは、移動可能か固定されている。地上通信線通信装置122および124は、ストリーミングデータのような、様々なタイプのマルチメディアデータを提供する、サービスをサービングノード(serving nodes)、あるいはコンテンツサーバを含むことができる。更に、MSは、マルチメディアデータのようなストリーミングデータを送信することができる。
インフラストラクチャ101はまた、他のコンポーネント、例えば、基地局(base stations)102、基地局コントローラ(base station controllers)106、モバイル交換局(mobile switching centers)108、スイッチングネットワーク(a switching network)120および同様のもの、を含んでいるかもしれない。一実施形態においては、基地局102は、基地局コントローラ106と一体化され、そして、他の実施形態においては、基地局102と基地局コントローラ106は別々のコンポーネントである。異なるタイプのスイッチングネットワーク120、例えば、IPネットワーク、あるいは公衆交換電話網(PSTN)が、通信システム100において信号を送るために使用されてもよい。
用語「順方向リンク(forward link)」あるいは「ダウンリンク(downlink)」は、インフラストラクチャ101からMSまでの信号経路を指し、そして、用語「逆方向リンク(reverse link)」あるいは「アップリンク(up link)」は、MSからインフラストラクチャまでの信号経路を指す。図1において示されるように、MS104および105は、順方向リンク上で信号132および136を受け取り、逆方向リンク上で信号134および138を送信する。一般に、MS104および105から送信される信号は、別の通信デバイス、例えば、別の遠隔ユニットなど、あるいは地上通信線通信装置122および124での受信を目的としており、IPネットワークまたはスイッチングネットワーク120を通って送られる。例えば、もし開始WCD(initiating WCD)104から送信された信号134が送信先MS(destination MS)105によって受け取られるように意図される場合、信号はインフラストラクチャ101を通して送られ、信号136が順方向リンク上で送信先MS105に送信される。同様に、インフラストラクチャ101中において開始された信号は、MS105にブロードキャストされるかもしれない。例えば、コンテンツプロバイダは、ストリーミングマルチメディアデータのようなマルチメディアデータを、MS105に送ってもよい。典型的には、MSあるいは地上通信線通信装置のような通信デバイスは、信号のイニシエータ(initiator)と送信先の両方であり得る。
MS104の例は、携帯電話、無線通信可能パーソナルコンピュータ、および携帯情報端末(PDA)、そして他の無線デバイスを含む。通信システム100は、1つ以上の無線標準規格をサポートするように設計されてもよい。例えば、標準規格は、汎欧州デジタル移動電話方式(GSM)、汎用パケット無線システム(GPRS)、拡張されたデータGSM環境(EDGE)、TIA/EIA−95−B(IS−95)、TIA/EIA−98−C(IS−98)、IS2000、HRPD、cdma2000、広帯域CDMA(WCDMA)として呼ばれる標準規格、およびその他を含んでよい。
図2は、無線ネットワーク上でパケットデータを配信するための例示的なパケットデータネットワークおよび様々なエアインタフェースのオプションを図示するブロック図である。記述される技術は、図2において例示されるもののようなパケット交換データネットワークにおいてインプリメントされることができる。図2の例で示されるように、パケット交換データネットワークシステムは、無線チャネル202、複数の受信ノード(recipient nodes)あるいはMS204、送信ノード(sending node)あるいはコンテンツサーバ206、サービングノード208、およびコントローラ210を含んでよい。送信ノード206は、インターネットのようなネットワーク212を介してサービングノード208に結合されることができる。
サービングノード208は、例えば、パケットデータサービングノード(PDSN)あるいはサービングGPRSサポートノード(SGSN)あるいはゲートウェイGPRSサポートノード(GGSN)を備えてよい。サービングノード208は、送信ノード206からパケットデータを受け取り、コントローラ210に情報のパケットを供給できる。コントローラ210は、例えば、基地局コントローラ/パケット制御機能(BSC/PCF)あるいは無線ネットワークコントローラ(Radio Network Controller)(RNC)を備えるかもしれない。一実施形態においては、コントローラ210は、無線アクセスネットワーク(Radio Access Network)(RAN)上でサービングノード208と通信する。コントローラ210は、サービングノード208と通信し、そして、少なくとも1つの受信ノード204に無線チャネル202上で情報のパケットを送信する。
一実施形態においては、サービングノード208または送信ノード206、あるいは両方は、また、データストリームを符号化するためのエンコーダ、あるいはデータストリームをデコードするためのデコーダ、あるいは両方を含んでいるかもしれない。例えば、エンコーダは、ビデオストリームを符号化し、それによって、データの可変サイズのフレーム(variable-sized frames of data)を生成することができるであろう、また、デコーダは、データの可変サイズのフレームを受け取り、それらをデコードすることができるであろう。フレームが様々なサイズであるがビデオフレームレートが一定であるので、データの可変ビットレートストリームが生成される。同様に、MSは、データストリームを符号化するためのエンコーダ、あるいは受信データストリームをデコードするためのデコーダ、あるいは両方を、含んでいるかもしれない。用語「コーデック(codec)」は、エンコーダとデコーダの組合せを説明するために使用される。
図2に例示される一例では、マルチメディアデータのようなデータが、ネットワーク、またはインターネット212に接続されている送信ノード206から、受信ノード、またはMS204に、サービングノード、またはパケットデータサービングノード(PDSN)206、およびコントローラ、または基地局コントローラ/パケット制御機能(BSC/PCF)208を経由して送られることができる。MS204とBSC/PCF210の間の無線チャネル202インタフェースは、エアインタフェースであり、そして典型的に、シグナリング(signaling)とベアラ(bearer)のための多くのチャネル、あるいはペイロード(payload)、データを使用することができる。
エアインタフェース202は、多くの無線標準規格のうちのいずれに従っても操作し得る。例えば、標準規格は、汎欧州デジタル移動電話方式(GSM)、汎用パケット無線システム(GPRS)、拡張されたデータGSM環境(EDGE)のような、TDMAに基づく標準規格、あるいはTIA/EIA−95−B(IS−95)、TIA/EIA−98−C(IS−98)、IS2000、HRPD、cdma2000、広帯域CDMA(WCDMA)のようなCDMAに基づく標準規格、およびその他、を含むことができる。
図3は、無線通信チャネル上での別々のRTPストリームの伝送のための従来の技術における同期問題を示すチャートである。図3において示される例において、ビデオのフレームおよびオーディオデータはRTPストリームに符号化され、そのあと、通信チャネルパケットに割り当てられる。図3は、ビデオフレーム302のストリームを示す。典型的には、ビデオフレームは一定のレートで生じる。例えば、ビデオフレームは、10Hzレートで生じるかもしれない、すなわち新しいフレームが100ミリセカンド毎に生じる。
図3の中で示されるように、各フレームを表わす棒の高さによって示されるように、個々のビデオフレームは異なる量のデータを含んでいるかもしれない。例えば、もしビデオデータが動画専門家グループ(Motion Picture Expert Group)(MPEG)データとして符号化される場合、そのときビデオストリームはイントラフレーム(intra frames)(Iフレーム)および予測フレーム(predictive frames)(Pフレーム)から構成される。Iフレームは自己完結型(self-contained)である、すなわち、それは1つの完全なビデオのフレームを描画するまたは表示するために必要とされる全ての情報を含む。Pフレームは自己完結型ではなく、典型的に、前のフレームに対する差異情報(differential information)、例えば運動ベクトルおよび差異テクスチャ情報(differential texture information)など、を含む。典型的に、Iフレームは、コンテンツおよびエンコーダの設定に依存して、Pフレームより最大8〜10倍大きいかもしれない。ビデオフレームは異なる量のデータを有するかもしれないけれども、それらはそれでも一定のレートで生じる。IとPのフレームは、更に、複数のビデオスライスにパーティションで区切られることができる。ビデオスライスはディスプレイ画面におけるより小さな領域を表わし、そして、デコーダによって個々にデコードされることができる。
図3においては、ビデオフレームNおよびN+4がIフレームを表わし、そして、ビデオフレームN+1、N+2、N+3、およびN+5がPフレームを表わすことができるであろう。示されるように、Iフレームは、フレームを表わす棒の高さによって示され、Pフレームよりもより大きい量のデータを含む。ビデオフレームは次に、RTPストリーム304中のパケットにパケット化される。図3において示されるように、ビデオIフレームNおよびN+4に対応するRTPパケットNおよびN+4は、それらの幅で示されるように、ビデオPフレームN+1、N+2、およびN+3に対応するRTPパケットN+l、N+2、およびN+3よりもより大きい。
ビデオRTPパケットは、通信チャネルパケット306に割り当てられる。CDMAあるいはGSMのような従来の通信チャネルにおいては、通信チャネルデータパケット306は一定のサイズで、そして一定のレートで送信される。例えば、通信チャネルデータパケット306は、50Hzレートで送信され得る、すなわち、新しいデータパケットは20ミリ秒毎に送信される。通信チャネルパケットは一定のサイズであるので、より大きなRTPパケットを送信することはより多くの通信チャネルパケットをとる。このように、IビデオフレームNおよびNの+4に対応するRTPパケットを送信することは、PビデオフレームN+1、N+2、およびN+3に対応するより小さなRTPパケットを送信するために必要とされる通信チャネルパケットよりも、より多くの通信チャネルパケット306をとる。図3において示された例においては、ビデオフレームNは、9つの通信チャネルパケット306のブロック308を占める。ビデオフレームN+1、N+2、およびN+3は、各々4つの通信チャネルパケット306を持ったブロック310,312、および314をそれぞれ占める。ビデオフレームN+4は、9つの通信チャネルパケット306のブロック316を占める。
ビデオデータの各フレームに対し、対応するオーディオデータがある。図2は、オーディオフレーム320のストリームを示す。各オーディオフレームN、N+1、N+2、N+3、N+4、およびN+5は、それぞれのビデオフレームに対応し、そして10Hzレートで生じる、すなわち、新しいオーディオフレームが100ミリ秒毎に始まる。一般に、オーディオデータは、関連するビデオデータよりも、複雑ではないので、それはより少ないビットによって表わすことができ、そして、RTPパケット322がフレームの期間内に通信チャネル上で送信されることができるサイズであるように、典型的に符号化される。更に、典型的なオーディオフレームは、CDMA、GSM、WDCMAなどにおいては、20ミリ秒毎に一度生成される。複数のオーディオフレームは、そのような場合、オーディオおよびビデオのパケットがRTPパケット化に対し同じ時間期間を表わすようにバンドルされる(bundled)。例えば、RTPパケットN、N+1、N+2、N+3、N+4、およびN+5は、各RTPパケットが100ミリ秒フレーム期間内に通信チャネル上で送信されることができるように各RTPパケットが通信チャネルパケット324に割り当てられることができるサイズである。
図3において示されるように、オーディオフレームパケットN、N+l、N2、N+3、N+4、およびN+5は、各々、ブロック326,328、330,332、334、および336をそれぞれ占め、各々は5つの通信チャネルパケット324を備える。
ビデオフレームとオーディオフレームのそれらそれぞれの通信チャネルパケットへの割り当ての比較は、オーディオおよびビデオのフレーム間の同期の損失(the loss of synchronization)を示す。図3中で示された例においては、9つの通信チャネルパケット306のブロック308が、ビデオフレームNを送信するために要求される。ビデオフレームNに関連したオーディオフレームNは、5つの通信チャネルパケット324のブロック326の中で送信された。通信チャネルパケット中のビデオおよびオーディオが同時に送信されるので、ビデオフレームNの伝送の間、オーディオフレームN+1のブロック328中の5つの通信チャネルパケットのうちの4つと同様に、オーディオフレームNも送信される。
例えば、図3において、例えば、もしビデオ、および関連するオーディオ、フレームレートが10Hzであり、そして、通信チャネルパケットレートが50Hzである場合、そのとき、フレームNの100ミリ秒期間の間に、全てのオーディオデータは送信されるが、ビデオデータは一部のみが送信される。この例においては、フレームNの全ビデオデータは、別の4つの通信チャネルパケット306が送信され、オーディオフレームNの完全な伝送のための100ミリ秒に比較し伝送のために180ミリ秒を必要とする完全なビデオフレームNとなるまで、送信されない。オーディオとビデオのRTPストリームは独立しているので、オーディオフレームN+1データの一部分は、ビデオフレームNデータが送信される間に送信される。ビデオとオーディオのストリーム間の同期のこの損失は、通信チャネルの受信機でのビデオとオーディオとの間の「スリップ(slip)」の原因となり得る。
ビデオエンコーダ、例えばH.263、AVC/H.264、MPEG−4などは、予測コーディングに起因して、そしてまた多くのパラメータの可変長コーディング(VLC)の使用にも起因して、本質的に事実上可変レート(variable rate)であるので、回線交換ネットワーク上およびパケット交換ネットワーク上での可変レートストリームのリアルタイム配信は、発信元と受信側でバッファを用いたトラフィックシェーピング(traffic shaping)によって一般に達成される。トラフィックシェーピングバッファは、典型的に望ましくない、更なる遅延をもたらす。例えば、更なる遅延は、ある人が話す時と別の人がその話を聞く時との間で遅延がある時、遠隔会議をしている(teleconferencing)間、いらいらさせ得る。
例えば、通信チャネルの受信側でのビデオが、オリジナルのビデオフレームレートと同じレートで再生されるので、通信チャネルでの遅れは再生中にポーズ(pause)を生じさせ得る。図3では、全フレームのデータが受け取られるまで、ビデオフレームNは再生されることができない。フレームデータ全体がフレーム期間中に受け取られないので、フレームNに対するビデオデータの全てが受け取られるまで、再生は休止する必要がある。更に、オーディオとビデオの再生が同期をとられるように、フレームNに対するビデオデータの全てが受け取られるまで、オーディオフレームNからの全てのデータは保存される必要がある。フレームNからのビデオデータがまだ受け取られつつある間に受け取られるフレームN+lからのオーディオデータは、フレームN+1からのビデオデータの全てが受け取られるまで、保存されなければならない、ということもまた注目される。ビデオフレームの可変サイズのために、大きなトラフィックシェーピングバッファが同期を達成するのに要求される。
図4は、本発明に従う、無線通信チャネル上での別々のRTPストリームの伝送のための技術を示すチャートである。図4は、図3と同様に、独立したRTPストリーム304および322にそれぞれ符号化される、可変サイズのビデオフレーム302のストリームと、そしてオーディオフレーム320のストリームとを示す。ビデオおよびオーディオフレームは、一定のレート、例えば10Hzレートで発生する。
図4においては、図3においてのように、ビデオフレームNおよびN+4が、Iフレームを表わすことができるであろう、そして、ビデオフレームN+1、N+2、N+3、およびN+5が、Pフレームを表わすことができるであろう。ビデオフレームは、RTPストリーム304の中のパケットにパケット化される(packetized)。図4において示されるように、ビデオIフレームNおよびN+4に対応するRTPパケットNおよびN+4は、それらの幅で示されるように、ビデオPフレームN+1、N+2、およびN+3に対応するRTPパケットN+1、N+2、およびN+3よりも、より広い(larger)。
ビデオRTPパケットは、通信チャネルパケット406に割り当てられる。上記の(係属中関連特許出願の参照)の中でリストされている同時係属中の出願において説明されているような技術を使用して、通信チャネルの容量は可変である。通信チャネルパケット406の可変容量のために、ビデオフレームNは、5つの通信チャネルパケット406を含むブロック408中で送信されることができる。
CDMAに基づく標準規格のような従来の通信チャネル、例えば、TIA/EIA−95−B(IS−95)、TIA/EIA−98−C(IS−98)、IS2000、HRPD、cdma2000、および広帯域CDMA(WCDMA)などにおいては、通信チャネルデータパケット406は、50Hzレートで送信されることができる、すなわち、新しいデータパケットが20ミリ秒毎に送信される。通信チャネルパケット406容量が変更されることができるので、ビデオフレームNの符号化は、ビデオフレームNの全体がフレーム期間中に送信されることができるように、制約されることができる。図4において示されるように、ビデオフレームNに対応する、RTPパケットNを送信する時、通信チャネルパケット406の容量は増加されるので、パケット全体がフレーム期間の間に送信されることができる。説明された技術はまた、GSM、GPRS、あるいはEDGEに基づく通信チャネルにも適用されることができる。
図4の中で示されるように、ビデオフレームN、N+1、N+2、N+3、N+4、およびN+5は、RTPパケットに符号化され、そして通信チャネルブロックに408,410、412、414、416、および418にそれぞれ割り当てされる。通信チャネル容量を変えることによって、ビデオフレーム全体がフレーム期間内に送信される、ということもまた注目される。例えば、もしビデオフレームレートが10Hzである場合、そのときビデオデータの全フレームは100ミリ秒のフレーム期間内に送信される。
ビデオデータ302の各フレームに対して、対応するオーディオフレーム320がある。各オーディオフレームN、N+1、N+2、N+3、N+4、およびN+5は、それぞれのビデオフレームに対応し、10Hzのレートで生じる、すなわち、新しいオーディオフレームが100ミリ秒毎に始まる。図3に関連して説明されたように、オーディオデータは、関連するビデオデータよりも、一般にそれほど複雑ではないのでより少ないビットによって表わされることができ、そして典型的に、RTPパケット322がフレームの100ミリ秒期間内に通信チャネル上で送信されることが出来るサイズであるように符号化される。すなわちオーディオRTPパケットN、N+1、N+2、N+3、N+4、そしてN+5は、各RTPパケットが通信チャネルパケットのブロック326,328、330,332、334、そして336にそれぞれ割り当てられることができるサイズである。このように、もしビデオフレームレートが10Hzである場合、そのとき各ビデオフレームは、100ミリ秒フレーム期間内に通信チャネル上で送信されることができる。ビデオと同様に、もしオーディオパケットサイズが大きい場合、通信チャネル容量もまた、フレーム期間中にオーディオフレーム全体の伝送をサポートするために変更されることができる。
図4においては、ビデオフレームとオーディオフレームのそれらそれぞれの通信チャネルパケットへの割り当ての比較は、ビデオとオーディオのフレームが同期されたままであることを示す。言いかえれば、フレーム期間毎に、ビデオ全体とオーディオフレーム全体が送信される。ビデオとオーディオのフレーム全体が各フレーム期間に送信されるので、更なるバッファリング(buffering)の必要は無い。受信されたビデオおよびオーディオデータは、フレーム期間中に蓄積されることのみを必要とし、そのあと、それは最後までプレーされる(played out)ことができる。通信チャネルによって持ち込まれる遅延がないので、ビデオとオーディオのフレームは同期されたままである。
図3において示されるように、ビデオフレームN+1、N+2、およびN+3は、ビデオデータのフレーム全体を送信するために、4つのビデオ通信チャネルパケット306を要求しただけである、ということが注目される。図4において示されるように、ビデオデータが5つのパケットに適合するように、ビデオ通信チャネルパケット406はサイズで縮小される(reduced)ことができる、あるいは、ブランクのパケットが送信されることができる。同様に、もしオーディオ通信チャネルにおいて利用可能な過剰の容量(excess capacity)がある場合は、ブランクのパケットが送信されることができる。このように、ビデオとオーディオのデータは、オーディオとビデオデータの全フレームが、それぞれのフレームレートと同じあるいは少ない期間を占める(that occupy the same period, or less, or the respective frame rate)通信チャネルパケットに割り当られるように、符号化される。
下記に説明されるように、通信ネットワークの面に依存して、異なる技術がRTPストリームを同期させるために使用されることができる。例えば、通信ネットワークは、過剰準備されている(over provisioned)かもしれない、すなわち、それは過剰な容量を有しているかもしれない、あるいは、通信ネットワークは、保証されたサービスの質(guaranteed Quality of Service)を有しているかもしれない。更に、RTPストリームは、通信ネットワーク上で送信される時、同期を維持するように修正されるかもしれない。これらの技術の各々は以下に説明される。
過剰準備通信ネットワーク
PDSN208と発信者206との間の通信リンクが過剰準備されている時、すなわち、ワイヤーラインインターネット上でのデータの伝送に利用可能な過剰容量がある、シナリオにおいては、その場合は、混雑状態に起因する遅延はない。通信リンクにおいて過剰容量があるので、伝送を遅らせる必要がないので、伝送は、通信リンクによって対応されることができる。伝送の遅れ無しで、音声とビデオのパケットの間には、それらがインフラストラクチャに、例えばPDSNなどに、到着するとき、「タイムスリップ(time slip)」はない。すなわち、本発明において説明されるように、オーディオとビデオデータは、PDSNまで互いに同期されたままであり、そして、同期は、PDSNとMSとの間で維持される。
過剰準備シナリオにおいては、オーディオ−ビジュアル同期は容易に達成される。例えば、ビデオデータは、100ミリ秒フレームに基づき、秒当り10フレーム(fps)のフレームレートを有しているかもしれないし、また、関連するオーディオは、20ミリ秒スピーチフレームに基づき、50fpsのフレームレートを有するかもしれない。この例においては、受信オーディオデータの5つのフレームはバッファリングされるであろうから、それはビデオフレームレートに同期するであろう。すなわち、オーディオデータの5つのフレームは、100ミリ秒のオーディオデータに対応して、バッファリングされるであろうから、それは100ミリ秒ビデオフレームと同期をとられるであろう。
最大遅延に関する保証されたQoSを備える通信ネットワーク
適切な数のより高いフレームレートスピーチフレームをバッファリングすることにより、より低いフレームレートビデオフレームに適合させることは可能である。一般に、もしビデオパケットがサービスの質(QoS)遅延保証(delay guarantee)を備えて配布される場合:
QoS_delay=nTms
但し、nはフレームにおける遅延(delay in frames)であり、そして
T=1000/frames_per_second
次に、nT/w スピーチフレームを保存するサイズに作られたバッファは、スピーチとビデオが同期することを保証するのに十分なスピーチフレームを保存することが必要とされる、なおここで、wはミリ秒でのスピーチフレームの期間である。cdma2000UMTSでは、スピーチフレームの期間、w、は20ミリ秒であり、他の通信チャネルでは、スピーチフレームの期間は異なっているか、あるいは変わり得る。
オーディオおよびビデオデータの同期をとるための別の技術は、両方のデータストリームをバッファリングすることを含む。例えば、もし通信システムがDミリ秒の保証された最大遅延を有する場合、Dは、オーディオおよびビデオストリームの伝送の間に経験され得る最大遅延であることを意味し、そのときは、適切なサイズに作られたバッファが、同期を維持するために使用されることができる。
例えば、Dの保証された最大遅延で、そのときDQ/Tビデオフレーム(Tはミリ秒でのビデオフレームの持続期間(duration)である)およびDQ/wスピーチフレーム(wはミリ秒でのスピーチフレームの持続期間である)をバファリングすることは、オーディオビデオ同期(AV−同期)を保証するであろう。これらの追加バッファスペースは、一般にデジッタバッファ(a de-jitter buffer)と呼ばれる。
本技術は、オーディオおよびビデオデータストリームの同期を説明した。本技術は、同期をとられるべき必要がある任意のデータストリームと共に使用されることができる。もし2つのデータストリーム、同じ情報間隔(information interval)を持ち且つ同期をとられるべき必要のある第1のより高いビットレートデータストリームおよび第2のより低いビットレートデータストリーム、がある場合、そのとき、より高いビットレートデータをバッファリングすることは、それがより低いビットレートデータと同期がとられることを可能にする。バッファのサイズは、上記に説明されたようにQoSに依存して、決定されることができる。同様に、より高いビットレートデータストリームとより低いビットレートデータストリームは、上記に説明されたように、バッファリングされ同期をとられることができる。
説明された本技術は、第1符号化データストリーム(a first encoded data stream)を受け取りそしてデコードされた第1データストリーム(a decoded first data stream)を出力するように構成された第1デコーダを含むデータストリーム同期装置によって実行されることができる、なおここでは、第1符号化されたデータストリームは、情報間隔の間 (during an information interval)、第1ビットレートを有する。そして、第2デコーダが第2符号化データストリームを受け取りそしてデコードされた第2データストリームを出力するように構成され、ここでは、第2符号化されたデータストリームは、情報間隔の間、第2ビットレートを有する。同期されたデータストリームはまた、少なくとも1情報間隔の間、デコードされた第1データストリームを蓄積しそして間隔期間毎にデコードされた第1データストリームのフレームを出力するように構成された第1バッファと、そして、少なくとも1情報間隔の間、デコードされた第2データストリームを蓄積しそして間隔期間毎にデコードされた第2データストリームのフレームを出力するように構成された第2バッファとを含む。さらに、結合器が、デコードされた第1データストリームのフレームおよびデコードされた第2データストリームのフレームを受け取りそして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力するように構成される。一例においては、第1符号化データストリームはビデオデータであるかもしれないし、また、第2符号化データストリームはオーディオデータであるかもしれないが、第1ビットレートは第2ビットレートよりもより高いようなものである。
多重化されたオーディオおよびビデオを備えた単一RTPストリーム
別の実施例は、単一のRTPストリームの中でオーディオとビデオを搬送する。注意されるように、オーディオおよびビデオを単一のRTPストリームとして送信することは、IPネットワークにおいては一般的なことではない。異なるリソース、例えば、ビデオとオーディオの両方が可能な端末、そしてオーディオのみが可能な端末、を持った参加者が、同じマルチメディア会議で通信することを可能にするように、RTPは設計された。
オーディオとビデオを別々のRTPストリームとして送信することの制限は、ビデオサービス用の無線ネットワークにおいては適用可能ではないかもしれない。この場合、新しいRTPプロファイルが、特定のスピーチおよびビデオコーデックペイロードを搬送するように設計されることができる。共通RTPストリームへのオーディオおよびビデオの結合は、過剰準備された通信ネットワークを必要とせずにオーディオおよびビデオデータ間のどんなタイムスリップも取り除く。従って、オーディオビデオ同期は、上記に説明されたように、過剰準備されたネットワークに関連して説明された技術を使用して達成されることができる。
図5は、通信チャネルパケットを受け取るように構成された無線オーディオ/ビデオ受信機500の一部分のブロック図である。図5において示されるように、オーディオ/ビデオ受信機500は、通信チャネルパケットを受け取るように構成された通信チャネルインタフェース502を含む。通信チャネルインタフェース502は、ビデオ通信チャネルパケットをビデオデコーダ504に、そしてオーディオ通信チャネルパケットをオーディオデコーダ506に、出力する。ビデオデコーダ504は、ビデオ通信チャネルパケットをデコードしそしてビデオデータをビデオバッファ508に出力する。オーディオデコーダ506はオーディオ通信チャネルパケットをデコードしそしてオーディオデータをオーディオバッファ510に出力する。ビデオバッファ508およびオーディオバッファは、フレーム期間の間、ビデオおよびオーディオデータをそれぞれ蓄積する。ビデオバッファ508およびオーディオバッファ510は、ビデオフレームおよびオーディオフレームをそれぞれ結合器512に出力する。結合器512は、ビデオおよびオートフレームを結合しそして同期をとられたオーディオおよびビデオ信号を出力するように構成される。ビデオバッファ508、オーディオバッファ510、および結合器512の動作は、コントローラ514によって制御され得る。
図6は、通信チャネルパケットを送信するように構成された無線オーディオ/ビデオ送信機600の一部分のブロック図である。図6において示されるように、オーディオ/ビデオ送信機600は、ビデオデータRTPストリームを受け取るように構成された、ビデオ通信チャネルインタフェース602を含んでいる。ビデオ通信チャネルインタフェースは、RTPパケットを、通信チャネルパケットに割り当てる。注意されるように、通信チャネルパケットの容量は、ビデオフレームと同じ期間を占める通信チャネルパケットにフレーム全体分のRTPビデオデータ(an entire frames worth of RTP video data)を割り当てるように変わり得る。オーディオ/ビデオ送信機600もまた、オーディオデータRTPストリームを受け取るように構成されたオーディオ通信チャネルインタフェース604を含む。オーディオ通信チャネルインタフェース604は、RTPパケットを通信チャネルパケットに割り当てる。注意されるように、一般に、通信チャネルパケットの容量は、オーディオフレームと同じ期間を占める通信チャネルパケットにRTPオーディオデータのフレーム全体を割り当てるのに十分であるであろう。もしチャネル容量が十分でない場合、そのときは、オーディオフレームと同じ期間を占める通信チャネルパケットにRTPオーディオデータのフレーム全体を割り当てるために十分な容量があるように、ビデオ通信チャネルパケットと同様に、それは変更され得る。
ビデオおよびオーディオ通信チャネルパケットは、ビデオおよびオーディオ通信チャネルインタフェース602と604によってそれぞれ出力され、そして結合器606に伝えられる。結合器606は、ビデオおよびオーディオ通信チャネルパケットを受理しそしてそれらを結合しそしてコンポジット信号(a composite signal)を出力するように構成される。結合器606の出力は、無線チャネルにそのコンポジット信号を送信する送信器608に伝えられる。ビデオ通信チャネルインタフェース602、オーディオ通信チャネルインタフェース604、および結合器606の動作は、コントローラ614によって制御され得る。
図7は、無線通信リンク上での独立したRTPストリームの伝送のフローチャートである。フローはブロックブロック702においてスタートし、ここでは、ビデオおよびオーディオRTPデータストリームが受け取られる。フローはそのあとブロック704に進み、ここでは、ビデオRTPストリームが通信チャネルパケットに割り当てられる。ブロック706では、オーディオRTPストリームは、通信チャネルパケットに割り当てられる。ブロック708では、ビデオおよびオーディオ通信チャネルパケットは、結合され、無線チャネル上で送信される。
図8は、無線通信チャネル上での受信オーディオおよびビデオデータのフローチャートである。フローはブロック802において始まり、ここでは、ビデオおよびオーディオデータが無線通信チャネル上で受け取られる。フローはブロック804に進み、ビデオおよびオーディオデータがデコードされる。ブロック806では、デコードされたビデオおよびオーディオデータは、それぞれのビデオおよびオーディオフレームにアセンブルされる (assembled)。ブロック810では、ビデオおよびオーディオデータは、同期をとられたビデオ/オーディオ フレームに結合される。ブロック810では、同期をとられたビデオ/オーディオ フレームが出力される。
図9は、本発明の例示的な実施形態に従って構成された、無線通信デバイスあるいは移動局(MS)のブロック図である。通信デバイス902は、ネットワークインタフェース906、コーデック908、ホストプロセッサ910、メモリデバイス912、プログラムプロダクト914、およびユーザインタフェース916を含む。
インフラストラクチャからの信号は、ネットワークインタフェース906によって受け取られ、そしてホストプロセッサ910に送られる。ホストプロセッサ910は、信号を受け取り、そして信号の内容に応じ、適切なアクションで応答する。例えば、ホストプロセッサ910は、受信信号自体をデコードするかもしれないし、あるいは、それは、受信信号をデコーディング用のコーデック908に送る(route)かもしれない。別の実施形態においては、受信信号は、ネットワークインタフェース906からコーデック908に直接送られる。
一実施形態では、ネットワークインタフェース906は、無線チャネル上でインフラストラクチャにインタフェースをとるトランシーバおよびアンテナかもしれない。別の実施形態では、ネットワークインタフェース906は、地上通信線上でインフラストラクチャにインタフェースをとるために使用されるネットワークインタフェースカードかもしれない。コーデック908は、デジタル信号プロセッサ(DSP)、あるいは中央処理装置(CPU)のような汎用プロセッサとしてインプリメントされるかもしれない。
ホストプロセッサ910およびコーデック908の両方はメモリデバイス912に接続される。メモリデバイス812は、ホストプロセッサ910またはDSP9によって実行されるであろうプログラムコードを保存するだけではなく、WCDの動作中にデータを保存するためにも使用されることができる。例えば、ホストプロセッサ、コーデック、あるいは両方共、メモリデバイス912に一時的に保存されるプログラミングインストラクションの制御の下で動作できる。ホストプロセッサ910およびコーデック908はまた、それら自体のプログラム記憶メモリを含むこともできる。プログラミングインストラクションが実行される時、ホストプロセッサ910またはコーデック908、あるいは両方が、それらの機能、例えばオーディオ/ビデオ データのようなマルチメディアストリームを符号化することあるいはデコーディングすること、そしてオーディオおよびビデオフレームをアセンブルすること、を実行する。このように、プログラミングステップは、それぞれのホストプロセッサ910およびコーデック908の機能をインプリメントするので、ホストプロセッサおよびコーデックは各々、望まれるようにコンテンツストリームをデコーディングするあるいは符号化するそしてフレームをアッセンブリする機能を実行するように作られることができる。プログラミングステップは、プログラムプロダクト914から受け取られることができる。プログラムプロダクト914は、ホストプロセッサ、コーデックあるいは両方による実行のために、プログラミングステップを、保存し、そしてメモリ912に転送できる。
プログラムプロダクト914は、ハードディスク、リムーバブルディスク、CD−ROMのような記憶装置に加えて、RAMメモリ、フラッシュメモリ、ROMメモリ、EPROMメモリ、EEPROMメモリ、レジスタ、のような半導体メモリチップであってもよく、あるいは、コンピュータ可読のインストラクションを保存できる技術的に知られている任意の形式の記憶媒体であってよい。更に、プログラムプロダクト914は、ネットワークから受け取られそしてメモリに保存されそしてそのあと実行されるプログラムステップを含むソースファイル(source file)であってもよい。このように、本発明に従う動作に必要な処理ステップは、プログラムプロダクト914上で具現化されることができる。図9においては、ホストプロセッサが記憶媒体から情報を読み出し、そして記憶媒体に情報を書き込むことができるように、例示的な記憶媒体がホストプロセッサ910に結合されて示されている。あるいは、記憶媒体はホストプロセッサ910と一体化されてもよい。
ユーザインタフェース916は、ホストプロセッサ910およびコーデック908の両方に接続されている。例えば、ユーザインタフェース916は、ユーザにマルチメディアデータを出力するために使用されるディスプレイおよびスピーカを含むことができる。
当業者は、実施形態に関連して記述された方法のステップは、本発明の範囲を逸脱することなく入れ替えられ得ることを認識するであろう。
当業者は、情報および信号は、様々な異なる技術および技法の任意のものを使用して表わされ得ることもまた理解するだろう。例えば、上記説明全体をとおして参照され得るデータ、インストラクション、コマンド、情報、信号、ビット、シンボル、およびチップは、電圧、電流、電磁波、磁場またはあるいは磁性粒子、光場または光学粒子、またはそれらの任意の組み合わせ、によって表されることができる。
当業者は更に、ここで開示された実施形態に関連して説明された、種々の説明的な論理ブロック、モジュール、回路、およびアルゴリズムステップは、電子ハードウェア、コンピュータソフトウェア、あるいは両方の組み合わせとしてインプリメントされ得ることを認識するであろう。ハードウェアとソフトウェアのこの互換性を明瞭に説明するために、様々な例示的なコンポーネント、ブロック、モジュール、回路、およびステップが、概してそれらの機能性の点から上記に説明されている。それらの機能性が、ハードウェアあるいはソフトウェアとしてインプリメントされるかどうかは、システム全体に課される特定のアプリケーションおよび設計制約に依存する。熟練した熟練職人は、各特定のアプリケーションに対し様々な方法で記述された機能性をインプリメントするかもしれないが、しかし、そのようなインプリメンテーションの決定は、本発明の範囲から逸脱させるものとして解釈されるべきでない。
ここに開示された実施形態に関連して記述された様々な説明のための論理ブロック、モジュール、および回路は、汎用プロセッサ、デジタルシグナルプロセッサ(DSP)、特定用途向けIC(ASIC)、フィールドプログラマブルゲートアレー(FPGA)あるいは他のプログラマブル論理デバイス、ディスクリートゲートあるいはトランジスタ論理、ディスクリートハードウェア部品、あるいはここで説明された機能を実行するように設計されたこれらの任意の組み合わせを使ってインプリメントあるいは実行され得る。汎用プロセッサは、マイクロプロセッサであってもよい、しかし別の方法では、プロセッサは、任意の従来のプロセッサ、コントローラ、マイクロコントローラ、あるいは状態機械でもよい。プロセッサはまた、計算装置の組み合わせ、例えばDSPとマイクロプロセッサとの組み合わせ、複数のマイクロプロセッサ、DSPコアと併用された1以上のマイクロプロセッサ、あるいは任意の他のそのようなコンフィギュレーション(configuration)としてインプリメントされてもよい。
ここに開示された実施形態に関連して記述された方法あるいはアルゴリズムのステップは、ハードウェアで直接に、プロセッサによって実行されるソフトウェアモジュールで、あるいは該2つの組合せで具現化され得る。ソフトウェアモジュールは、RAMメモリ、フラッシュメモリ、ROMメモリ、EPROMメモリ、EEPROMメモリ、レジスタ、ハードディスク、リムーバブルディスク、CD−ROM、あるいは技術的に知られている記憶媒体の任意の他の形態、に存在しうる。例示的な記憶媒体は、プロセッサが記憶媒体から情報を読み出しそして記憶媒体に情報を書き込めるように、プロセッサに結合される。別の方法では、記憶媒体はプロセッサに内蔵されてもよい。プロセッサと記憶媒体はASICに存在してもよい。ASICはユーザ端末の中に存在してもよい。別の方法では、プロセッサと記憶媒体は、ユーザ端末の中にディスクリート部品として存在してもよい。
開示された実施形態の以上の説明は、当業者の誰もが本発明を作りまたは使用するのを可能とするように提供されている。これらの実施形態の様々の変形は当業者には容易に明らかであり、そして、ここに定義された包括的な原理は本発明の精神或いは範囲を逸脱することなく他の実施形態に適用されることが出来る。従って、本発明は、ここで示された実施形態に限定されるように意図されてはおらず、ここに開示された原理及び新規な特徴と整合する最も広い範囲が与えられるべきものである。
以下に、本願発明の当初の特許請求の範囲に記載された発明を付記する。
[1]
第1符号化されたデータストリームを受け取りそしてデコードされた第1データストリームを出力するように構成された第1デコーダと、なおここでは、前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
第2符号化されたデータストリームを受け取りそしてデコードされた第2データストリームを出力するように構成された第2デコーダと、なおここでは、前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力するように構成された第1バッファと;
少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力するように構成された第2バッファと;そして
デコードされた第1データストリームの前記フレームおよびデコードされた第2データストリームの前記フレームを受け取りそして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力するように構成された結合器と;
を備えるデータストリーム同期装置。
[2]
前記第1符号化されたデータストリームはビデオデータである、前記[1]記載のデータストリーム同期装置。
[3]
前記第2符号化されたデータストリームはオーディオデータである、前記[1]記載のデータストリーム同期装置。
[4]
前記第1ビットレートは前記第2ビットレートよりもより高い、前記[1]記載のデータストリーム同期装置。
[5]
符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと;
符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと;
少なくとも1フレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと;
複数のフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと;そして
ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と;
を備える遠隔局装置。
[6]
前記ビデオデコーダは、MPEGデコーダ、H.263デコーダ、あるいはH.264デコーダである、前記[5]記載の遠隔局。
[7]
前記オーディオデコーダは、MPEGデコーダ、H.263デコーダあるいはH.264デコーダである、前記[5]記載の遠隔局。
[8]
オーディオおよびビデオデータのデコーディングおよび同期を制御する制御プロセッサを更に備える、前記[5]記載の遠隔局。
[9]
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと;
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと;そして
前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と;
を備える遠隔局装置。
[10]
前記のオーディオおよびビデオデータの通信チャネルパケットへの割り当てを制御する制御プロセッサを更に備える、前記[9]記載の遠隔局装置。
[11]
符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと;
符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと;
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと;
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと;そして
ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と;
を備える基地局装置。
[12]
前記ビデオデコーダは、MPEGデコーダ、H.263デコーダ、あるいはH.264デコーダである、前記[11]記載の基地局。
[13]
前記オーディオデコーダは、MPEGデコーダ、H.263デコーダあるいはH.264デコーダである、前記[11]記載の基地局。
[14]
オーディオおよびビデオデータのデコーディングおよび同期を制御する制御プロセッサを更に備える、前記[11]記載の基地局。
[15]
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと;
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと;そして
前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と;
を備える基地局装置。
[16]
前記のオーディオおよびビデオデータの通信チャネルパケットへの割り当てを制御する制御プロセッサを更に備える、前記[15]記載の基地局装置。
[17]
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと、
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと、
前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と、
を有する基地局装置と;
ビデオ通信チャネルパケットを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと、
オーディオ通信チャネルパケットを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと、
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと、
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと、そして
ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と、
を有する遠隔局装置と;
を備える無線通信システム。
[18]
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと、
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと、
前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と、
を有する遠隔局装置と;
ビデオ通信チャネルパケットを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと、
オーディオ通信チャネルパケットを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと、
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと、
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと、そして
ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と、
を有する基地局装置と;
を備える無線通信システム。
[19]
第1符号化されたデータストリームを受け取り、デコードしそしてデコードされた第1データストリームを出力することと、なおここでは、前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
第2符号化されたデータストリームを受け取り、デコードしそしてデコードされた第2データストリームを出力することと、なおここでは、前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力することと;
少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力することと;そして
デコードされた第1データストリームの前記フレームとデコードされた第2データストリームの前記フレームとを結合し、そして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力することと;
を含む、データストリームをデコードし同期させる方法。
[20]
オーディオおよびビデオデータをデコードし同期させる方法であって、
符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力することと;
符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力することと;
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力することと;
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力することと;そして
ビデオデータの前記フレームとオーディオデータの前記フレームとを結合し、そしてビデオフレーム期間毎にオーディオビデオデータの同期をとられたフレームを出力することと;
を含む方法。
[21]
オーディオおよびビデオデータを符号化する方法であって、
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てることと;そして
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てることと;
を含む、方法。
[22]
データストリームをデコードし同期させる方法を具現化するコンピュータ可読媒体であって、前記方法は
第1符号化されたデータストリームを受け取り、デコードしそしてデコードされた第1データストリームを出力することと、なおここでは、前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
第2符号化されたデータストリームを受け取り、デコードしそしてデコードされた第2データストリームを出力することと、なおここでは、前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力することと;
少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力することと;そして
デコードされた第1データストリームの前記フレームとデコードされた第2データストリームの前記フレームとを結合し、そして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力することと;
を含む、コンピュータ可読媒体。
[23]
オーディオおよびビデオデータをデコードし同期させる方法を具現化するコンピュータ可読媒体であって、前記方法は
符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力することと;
符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力することと;
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力することと;
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力することと;そして
ビデオデータの前記フレームとオーディオデータの前記フレームとを結合し、そしてビデオフレーム期間毎にオーディオビデオデータの同期をとられたフレームを出力することと;
を含む、コンピュータ可読媒体。
[24]
オーディオおよびビデオデータを符号化する方法を具現化するコンピュータ可読媒体であって、前記方法は、
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てることと;そして
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てることと;
を含む、コンピュータ可読媒体。
[25]
第1符号化されたデータストリームを受け取り、そしてデコードされた第1データストリームを出力するための手段と、なおここでは、前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
第2符号化されたデータストリームを受け取り、そしてデコードされた第2データストリームを出力するための手段と、なおここでは、前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力するための手段と;
少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力するための手段と;そして
デコードされた第1データストリームの前記フレームとデコードされた第2データストリームの前記フレームとを結合し、そして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力するための手段と;
を備える、データストリーム同期装置。
[26]
符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するための手段と;
符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するための手段と;
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するための手段と;
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するための手段と;そして
ビデオデータの前記フレームとオーディオデータの前記フレームとを結合し、そしてオーディオビデオデータの同期をとられたフレームを出力するための手段と;
を備える遠隔局装置。
[27]
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるための手段と;そして
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるための手段と;
を備える遠隔局装置。
[28]
符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するための手段と;
符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するための手段と;
ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するための手段と;
オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するための手段と;そして
ビデオデータの前記フレームとオーディオデータの前記フレームとを結合しそしてオーディオビデオデータの同期をとられたフレームを出力するための手段と;
を備える基地局装置。
[29]
ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるための手段と;そして
オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオフレームレートと同じあるいはより少ない期間を占める通信チャネルパケットに割り当てるための手段と;
を備える基地局装置。

Claims (26)

  1. 第1通信チャネルパケットの第1符号化されたデータストリームを受け取りそしてデコードされた第1データストリームを出力するように構成された第1デコーダと、なおここでは、前記第1通信チャネルパケットの前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
    第2通信チャネルパケットの第2符号化されたデータストリームを受け取りそしてデコードされた第2データストリームを出力するように構成された第2デコーダと、なおここでは、前記第2通信チャネルパケットの前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
    少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力するように構成された第1バッファと;
    少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力するように構成された第2バッファと;そして
    デコードされた第1データストリームの前記フレームおよびデコードされた第2データストリームの前記フレームを受け取りそして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力するように構成された結合器と;
    を備え、
    前記第1符号化されたデータストリームはビデオデータであり、
    前記第2符号化されたデータストリームはオーディオデータであり、
    前記第1ビットレートは前記第2ビットレートよりも高く、
    前記第1通信チャネルパケットの容量を変更することにより、あるいは、前記第1通信チャネルパケットの容量および前記第2通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記第1通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記第2通信チャネルパケットに割り当てられる
    データストリーム同期装置。
  2. 通信チャネルパケットの符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと;
    通信チャネルパケットの符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと;
    少なくとも1フレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと;
    複数のフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと;そして
    ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    遠隔局装置。
  3. 前記ビデオデコーダは、MPEGデコーダ、H.263デコーダ、あるいはH.264デコーダである、前記請求項2記載の遠隔局。
  4. 前記オーディオデコーダは、MPEGデコーダ、H.263デコーダあるいはH.264デコーダである、前記請求項2記載の遠隔局。
  5. オーディオおよびビデオデータのデコーディングおよび同期を制御する制御プロセッサを更に備える、前記請求項2記載の遠隔局。
  6. ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる;そして
    前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高い、
    遠隔局装置。
  7. 前記のオーディオおよびビデオデータの通信チャネルパケットへの割り当てを制御する制御プロセッサを更に備える、前記請求項6記載の遠隔局装置。
  8. 通信チャネルパケットの符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと;
    通信チャネルパケットの符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと;
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと;
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと;そして
    ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    基地局装置。
  9. 前記ビデオデコーダは、MPEGデコーダ、H.263デコーダ、あるいはH.264デコーダである、前記請求項8記載の基地局。
  10. 前記オーディオデコーダは、MPEGデコーダ、H.263デコーダあるいはH.264デコーダである、前記請求項8記載の基地局。
  11. オーディオおよびビデオデータのデコーディングおよび同期を制御する制御プロセッサを更に備える、前記請求項8記載の基地局。
  12. ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる;そして
    前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高い、
    基地局装置。
  13. 前記のオーディオおよびビデオデータの通信チャネルパケットへの割り当てを制御する制御プロセッサを更に備える、前記請求項12記載の基地局装置。
  14. ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と、
    を有する基地局装置と;
    ビデオ通信チャネルパケットを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと、
    オーディオ通信チャネルパケットを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと、
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと、
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと、そして
    ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と、
    を有する遠隔局装置と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    前記ビデオ通信チャネルパケットの容量を変更することにより、あるいは、前記ビデオ通信チャネルパケットの容量および前記オーディオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    無線通信システム。
  15. ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てるように構成されたビデオ通信チャネルインタフェースと、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てるように構成されたオーディオ通信チャネルインタフェースと、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    前記ビデオおよびオーディオの通信チャネルパケットを受け取りそして送信するように構成された送信機と、
    を有する遠隔局装置と;
    ビデオ通信チャネルパケットを受け取りそしてデコードされたビデオデータを出力するように構成されたビデオデコーダと、
    オーディオ通信チャネルパケットを受け取りそしてデコードされたオーディオデータを出力するように構成されたオーディオデコーダと、
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するように構成されたビデオバッファと、
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するように構成されたオーディオバッファと、そして
    ビデオデータの前記フレームおよびオーディオデータの前記フレームを受け取りそしてオーディオビデオデータの同期をとられたフレームを出力するように構成された結合器と、
    を有する基地局装置と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    前記ビデオ通信チャネルパケットの容量を変更することにより、あるいは、前記ビデオ通信チャネルパケットの容量および前記オーディオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    無線通信システム。
  16. 第1通信チャネルパケットの第1符号化されたデータストリームを受け取り、デコードしそしてデコードされた第1データストリームを出力することと、なおここでは、前記第1通信チャネルパケットの前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
    第2通信チャネルパケットの第2符号化されたデータストリームを受け取り、デコードしそしてデコードされた第2データストリームを出力することと、なおここでは、前記第2通信チャネルパケットの前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
    少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力することと;
    少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力することと;そして
    デコードされた第1データストリームの前記フレームとデコードされた第2データストリームの前記フレームとを結合し、そして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力することと;
    を含み、
    前記第1符号化されたデータストリームはビデオデータであり、
    前記第2符号化されたデータストリームはオーディオデータであり、
    前記第1ビットレートは前記第2ビットレートよりも高く、
    前記第1通信チャネルパケットの容量を変更することにより、あるいは、前記第1通信チャネルパケットの容量および前記第2通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記第1通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記第2通信チャネルパケットに割り当てられる
    データストリームをデコードし同期させる方法。
  17. オーディオおよびビデオデータをデコードし同期させる方法であって、
    通信チャネルパケットの符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力することと;
    通信チャネルパケットの符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力することと;
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力することと;
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力することと;そして
    ビデオデータの前記フレームとオーディオデータの前記フレームとを結合し、そしてビデオフレーム期間毎にオーディオビデオデータの同期をとられたフレームを出力することと;
    を含み、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    方法。
  18. オーディオおよびビデオデータを符号化する方法であって、
    ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てることと、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てることと、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    を含み、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高い、
    方法。
  19. データストリームをデコードし同期させる方法を具現化するコンピュータ可読記憶媒体であって、前記方法は
    第1通信チャネルパケットの第1符号化されたデータストリームを受け取り、デコードしそしてデコードされた第1データストリームを出力することと、なおここでは、前記第1通信チャネルパケットの前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
    第2通信チャネルパケットの第2符号化されたデータストリームを受け取り、デコードしそしてデコードされた第2データストリームを出力することと、なおここでは、前記第2通信チャネルパケットの前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
    少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力することと;
    少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力することと;そして
    デコードされた第1データストリームの前記フレームとデコードされた第2データストリームの前記フレームとを結合し、そして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力することと;
    を含み、
    前記第1符号化されたデータストリームはビデオデータであり、
    前記第2符号化されたデータストリームはオーディオデータであり、
    前記第1ビットレートは前記第2ビットレートよりも高く、
    前記第1通信チャネルパケットの容量を変更することにより、あるいは、前記第1通信チャネルパケットの容量および前記第2通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記第1通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記第2通信チャネルパケットに割り当てられる
    コンピュータ可読記憶媒体。
  20. オーディオおよびビデオデータをデコードし同期させる方法を具現化するコンピュータ可読記憶媒体であって、前記方法は
    通信チャネルパケットの符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力することと;
    通信チャネルパケットの符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力することと;
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力することと;
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力することと;そして
    ビデオデータの前記フレームとオーディオデータの前記フレームとを結合し、そしてオーディオビデオデータの同期をとられたフレームを出力することと;
    を含み、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    コンピュータ可読記憶媒体。
  21. オーディオおよびビデオデータを符号化する方法を具現化するコンピュータ可読記憶媒体であって、前記方法は、
    ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てることと、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てることと、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    を含み、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高い、
    コンピュータ可読記憶媒体。
  22. 通信チャネルパケットの第1符号化されたデータストリームをデコードし、そしてデコードされた第1データストリームを出力するための手段と、なおここでは、前記通信チャネルパケットの前記第1符号化されたデータストリームは情報間隔の間、第1ビットレートを有する;
    通信チャネルパケットの第2符号化されたデータストリームをデコードし、そしてデコードされた第2データストリームを出力するための手段と、なおここでは、前記通信チャネルパケットの前記第2符号化されたデータストリームは前記情報間隔の間、第2ビットレートを有する;
    少なくとも1情報間隔の間、前記デコードされた第1データストリームを蓄積し、そして間隔期間毎に前記デコードされた第1データストリームのフレームを出力するための手段と;
    少なくとも1情報間隔の間、前記デコードされた第2データストリームを蓄積し、そして間隔期間毎に前記デコードされた第2データストリームのフレームを出力するための手段と;そして
    デコードされた第1データストリームの前記フレームとデコードされた第2データストリームの前記フレームとを結合し、そして第1および第2のデコードされたデータストリームの同期をとられたフレームを出力するための手段と;
    を備え、
    前記第1符号化されたデータストリームはビデオデータであり、
    前記第2符号化されたデータストリームはオーディオデータであり、
    前記第1ビットレートは前記第2ビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    データストリーム同期装置。
  23. 通信チャネルパケットの符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するための手段と;
    通信チャネルパケットの符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するための手段と;
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するための手段と;
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するための手段と;そして
    ビデオデータの前記フレームとオーディオデータの前記フレームとを結合し、そしてオーディオビデオデータの同期をとられたフレームを出力するための手段と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    遠隔局装置。
  24. ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てるための手段と、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる;そして
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てるための手段と、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高い、
    遠隔局装置。
  25. 通信チャネルパケットの符号化されたビデオデータを受け取りそしてデコードされたビデオデータを出力するための手段と;
    通信チャネルパケットの符号化されたオーディオデータを受け取りそしてデコードされたオーディオデータを出力するための手段と;
    ビデオフレーム期間、デコードされたビデオデータを蓄積し、そしてフレーム期間毎にビデオデータのフレームを出力するための手段と;
    オーディオフレーム期間、デコードされたオーディオデータを蓄積し、そしてフレーム期間毎にオーディオデータのフレームを出力するための手段と;そして
    ビデオデータの前記フレームとオーディオデータの前記フレームとを結合しそしてオーディオビデオデータの同期をとられたフレームを出力するための手段と;
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高く、
    ビデオ用の前記通信チャネルパケットの容量を変更することにより、あるいは、ビデオ用の前記通信チャネルパケットの容量およびオーディオ用の前記通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームがビデオ用の前記通信チャネルパケットに割り当てられ、そして、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームがオーディオ用の前記通信チャネルパケットに割り当てられる
    基地局装置。
  26. ビデオRTPストリームを受け取りそしてRTPビデオデータの全フレームをビデオ通信チャネルパケットに割り当てるための手段と、なお、前記ビデオ通信チャネルパケットの容量を変更することにより、ビデオフレームの全体がフレーム期間内に送信されることができるようにビデオデータの全フレームが前記ビデオ通信チャネルパケットに割り当てられる
    オーディオRTPストリームを受け取りそしてRTPオーディオデータの全フレームをオーディオ通信チャネルパケットに割り当てるための手段と、なお、前記オーディオ通信チャネルパケットの容量を変更することにより、オーディオフレームの全体がフレーム期間内に送信されることができるようにオーディオデータの全フレームが前記オーディオ通信チャネルパケットに割り当てられる
    を備え、
    前記ビデオデータのビットレートは前記オーディオデータのビットレートよりも高い、
    基地局装置。
JP2010265208A 2004-05-13 2010-11-29 無線通信システムにおけるオーディオおよびビデオデータの同期 Expired - Fee Related JP5356360B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US57167304P 2004-05-13 2004-05-13
US60/571,673 2004-05-13

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2007513422A Division JP2007537684A (ja) 2004-05-13 2005-05-13 無線通信システムにおけるオーディオおよびビデオデータの同期

Publications (2)

Publication Number Publication Date
JP2011142616A JP2011142616A (ja) 2011-07-21
JP5356360B2 true JP5356360B2 (ja) 2013-12-04

Family

ID=34969576

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2007513422A Withdrawn JP2007537684A (ja) 2004-05-13 2005-05-13 無線通信システムにおけるオーディオおよびビデオデータの同期
JP2007513418A Expired - Fee Related JP4361585B2 (ja) 2004-05-13 2005-05-13 無線通信システム上で伝送されるマルチメディアデータのヘッダ圧縮
JP2007513421A Expired - Fee Related JP4448171B2 (ja) 2004-05-13 2005-05-13 通信システムのチャンネルへの情報の割り当てのための方法および装置
JP2007513420A Expired - Fee Related JP4554680B2 (ja) 2004-05-13 2005-05-13 通信チャネルを介した情報の配信
JP2010265208A Expired - Fee Related JP5356360B2 (ja) 2004-05-13 2010-11-29 無線通信システムにおけるオーディオおよびビデオデータの同期

Family Applications Before (4)

Application Number Title Priority Date Filing Date
JP2007513422A Withdrawn JP2007537684A (ja) 2004-05-13 2005-05-13 無線通信システムにおけるオーディオおよびビデオデータの同期
JP2007513418A Expired - Fee Related JP4361585B2 (ja) 2004-05-13 2005-05-13 無線通信システム上で伝送されるマルチメディアデータのヘッダ圧縮
JP2007513421A Expired - Fee Related JP4448171B2 (ja) 2004-05-13 2005-05-13 通信システムのチャンネルへの情報の割り当てのための方法および装置
JP2007513420A Expired - Fee Related JP4554680B2 (ja) 2004-05-13 2005-05-13 通信チャネルを介した情報の配信

Country Status (14)

Country Link
US (6) US9717018B2 (ja)
EP (9) EP1751955B1 (ja)
JP (5) JP2007537684A (ja)
KR (6) KR101049701B1 (ja)
CN (5) CN1973515B (ja)
AT (4) ATE417436T1 (ja)
BR (4) BRPI0510962A (ja)
CA (6) CA2565977C (ja)
DE (4) DE602005011611D1 (ja)
ES (4) ES2323011T3 (ja)
MX (4) MXPA06013193A (ja)
MY (3) MY139431A (ja)
TW (4) TWI381681B (ja)
WO (4) WO2005114943A2 (ja)

Families Citing this family (196)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7136395B2 (en) * 2000-11-30 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Method and system for transmission of headerless data packets over a wireless link
EP1751955B1 (en) * 2004-05-13 2009-03-25 Qualcomm, Incorporated Header compression of multimedia data transmitted over a wireless communication system
US7599371B1 (en) * 2004-06-09 2009-10-06 Cisco Technology, Inc. System and method for optimizing data transport in a communications system
FI20040817A0 (fi) * 2004-06-14 2004-06-14 Nokia Corp Pakkausparametrien siirto matkaviestinjärjestelmässä
US7664057B1 (en) * 2004-07-13 2010-02-16 Cisco Technology, Inc. Audio-to-video synchronization system and method for packet-based network video conferencing
US20060062312A1 (en) * 2004-09-22 2006-03-23 Yen-Chi Lee Video demultiplexer and decoder with efficient data recovery
US7804850B2 (en) 2004-10-01 2010-09-28 Nokia Corporation Slow MAC-e for autonomous transmission in high speed uplink packet access (HSUPA) along with service specific transmission time control
EP1821442A4 (en) * 2004-11-17 2011-07-20 Sharp Kk TRANSMITTER APPARATUS, RECEIVER APPARATUS AND COMMUNICATION SYSTEM
EP1829315B1 (en) * 2004-11-30 2016-08-17 Telefonaktiebolaget LM Ericsson (publ) Method for delivering multimedia files
US7675872B2 (en) 2004-11-30 2010-03-09 Broadcom Corporation System, method, and apparatus for displaying pictures
US7970345B2 (en) * 2005-06-22 2011-06-28 Atc Technologies, Llc Systems and methods of waveform and/or information splitting for wireless transmission of information to one or more radioterminals over a plurality of transmission paths and/or system elements
US7764713B2 (en) * 2005-09-28 2010-07-27 Avaya Inc. Synchronization watermarking in multimedia streams
US8102878B2 (en) * 2005-09-29 2012-01-24 Qualcomm Incorporated Video packet shaping for video telephony
US9692537B2 (en) * 2005-10-18 2017-06-27 Avago Technologies General Ip (Singapore) Pte. Ltd. System, method, and apparatus for jitter reduction in a video decoder system
US8842555B2 (en) * 2005-10-21 2014-09-23 Qualcomm Incorporated Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems
US8548048B2 (en) * 2005-10-27 2013-10-01 Qualcomm Incorporated Video source rate control for video telephony
US8994879B2 (en) * 2005-10-21 2015-03-31 Thomson Licensing Method and apparatus for audio and video synchronization timestamp rollover correction
US8406309B2 (en) 2005-10-21 2013-03-26 Qualcomm Incorporated Video rate adaptation to reverse link conditions
US8514711B2 (en) * 2005-10-21 2013-08-20 Qualcomm Incorporated Reverse link lower layer assisted video error control
US7839948B2 (en) * 2005-12-02 2010-11-23 Qualcomm Incorporated Time slicing techniques for variable data rate encoding
JP4747816B2 (ja) * 2005-12-05 2011-08-17 日本電気株式会社 パケット相乗り方法、プログラム及び装置
US8014389B2 (en) * 2005-12-06 2011-09-06 Lippershy Celestial Llc Bidding network
JP5011308B2 (ja) * 2005-12-23 2012-08-29 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ データストリームの分割
US20070169152A1 (en) * 2005-12-30 2007-07-19 Daniel Roodnick Data and wireless frame alignment for error reduction
US8953596B2 (en) * 2006-01-06 2015-02-10 Qualcomm Incorporated Conserving network capacity by releasing QoS resources
KR100754736B1 (ko) * 2006-02-10 2007-09-03 삼성전자주식회사 영상 수신 시스템에서 영상 프레임의 재생 방법 및 그 장치
US8284713B2 (en) * 2006-02-10 2012-10-09 Cisco Technology, Inc. Wireless audio systems and related methods
KR100728038B1 (ko) * 2006-03-03 2007-06-14 삼성전자주식회사 Plc 네트워크상에서 데이터를 묶어서 전송하는 방법 및장치
US7876695B2 (en) * 2006-03-07 2011-01-25 Telefonaktiebolaget Lm Ericsson (Publ) Communication station and method providing flexible compression of data packets
JP4659657B2 (ja) * 2006-03-28 2011-03-30 富士通株式会社 フレーム多重装置
US8059534B2 (en) * 2006-04-03 2011-11-15 Lg Electronics Inc. Method of performing scheduling in a wired or wireless communication system and apparatus thereof
US7684816B2 (en) * 2006-04-06 2010-03-23 Motorola, Inc. Method and apparatus to facilitate communication resource allocation for supergroups
CN101438533B (zh) * 2006-05-15 2013-01-23 艾利森电话股份有限公司 用于分层媒体的无线组播
CN1983905B (zh) * 2006-05-25 2011-05-11 华为技术有限公司 终端在1x网络下建立HRPD网络分组数据业务的方法
US7920469B2 (en) * 2006-06-15 2011-04-05 Alcatel-Lucent Usa Inc. Indicating a variable control channel structure for transmissions in a cellular system
US20070299983A1 (en) * 2006-06-21 2007-12-27 Brothers Thomas J Apparatus for synchronizing multicast audio and video
US20070297454A1 (en) * 2006-06-21 2007-12-27 Brothers Thomas J Systems and methods for multicasting audio
US7584495B2 (en) * 2006-06-30 2009-09-01 Nokia Corporation Redundant stream alignment in IP datacasting over DVB-H
US20080025249A1 (en) * 2006-07-28 2008-01-31 Qualcomm Incorporated 1xEVDO WIRELESS INTERFACE TO ENABLE COMMUNICATIONS VIA A SATELLITE RELAY
US20080025312A1 (en) * 2006-07-28 2008-01-31 Qualcomm Incorporated Zero-header compression for improved communications
US8060651B2 (en) * 2006-08-17 2011-11-15 Sharp Laboratories Of America, Inc. Systems and methods for adaptively packetizing data partitions for transport over a network
US8644314B2 (en) * 2006-09-07 2014-02-04 Kyocera Corporation Protocol and method of VIA field compression in session initiation protocol signaling for 3G wireless networks
US8379733B2 (en) * 2006-09-26 2013-02-19 Qualcomm Incorporated Efficient video packetization methods for packet-switched video telephony applications
US8484059B2 (en) 2006-10-17 2013-07-09 At&T Intellectual Property I, L.P. Methods, systems, and products for surveying facilities
US8069412B2 (en) * 2006-10-17 2011-11-29 At&T Intellectual Property I, L.P. Methods, systems, and products for mapping facilities data
US20080101476A1 (en) * 2006-11-01 2008-05-01 Qualcomm Incorporated Video coding rate adaptation to reduce packetization overhead
CN101179484A (zh) * 2006-11-09 2008-05-14 华为技术有限公司 一种不同媒体流间的同步方法及系统
CN100450163C (zh) * 2006-11-30 2009-01-07 中兴通讯股份有限公司 一种移动多媒体广播视音频同步播放的方法
US7889191B2 (en) 2006-12-01 2011-02-15 Semiconductor Components Industries, Llc Method and apparatus for providing a synchronized video presentation without video tearing
US7953118B2 (en) * 2006-12-08 2011-05-31 Microsoft Corporation Synchronizing media streams across multiple devices
TWI364954B (en) 2006-12-19 2012-05-21 Innovative Sonic Ltd Method and apparatus of continuous packet connectivity enhancement in a wireless communications system
KR100946893B1 (ko) * 2007-01-03 2010-03-09 삼성전자주식회사 이동 통신 시스템에서 순방향 패킷 스케줄링 방법 및 그장치
CN101578793B (zh) 2007-01-04 2014-03-05 高通股份有限公司 无线通信的分布式频谱感测方法和装置
WO2008086509A2 (en) * 2007-01-10 2008-07-17 Qualcomm Incorporated Content- and link-dependent coding adaptation for multimedia telephony
KR101369838B1 (ko) * 2007-04-20 2014-03-06 삼성전자주식회사 전송 스트림 생성장치, 송신 장치, 수신 장치, 이들이포함된 디지털 방송 시스템 및 그 방법
KR100861594B1 (ko) * 2007-04-23 2008-10-07 주식회사 케이티프리텔 멀티미디어 데이터 전송률 제어 장치 및 그 방법
US8875193B2 (en) * 2007-05-14 2014-10-28 Sigma Group, Inc. Wireless multimedia system
US8667318B2 (en) * 2007-05-14 2014-03-04 Picongen Wireless, Inc. Method and apparatus for wireless clock regeneration
CN100574283C (zh) * 2007-06-12 2009-12-23 华为技术有限公司 上、下行传输方法及汇聚节点
EP2023521A1 (en) * 2007-07-17 2009-02-11 Alcatel Lucent System and method for improving the use of radio spectrum in transmission of data
CN101094406B (zh) * 2007-07-23 2010-09-29 北京中星微电子有限公司 一种视频数据流的传输方法及装置
GB0715281D0 (en) * 2007-08-07 2007-09-12 Nokia Siemens Networks Oy Reduced transmission time interval
US7826360B1 (en) 2007-08-27 2010-11-02 Marvell International Ltd. Adjusting transmission rates during packet expansion using in band signaling
JP4410277B2 (ja) * 2007-08-28 2010-02-03 富士通株式会社 半導体装置、および半導体装置の制御方法
KR100916469B1 (ko) 2007-08-29 2009-09-08 엘지이노텍 주식회사 미디어 장치 및 그 제어방법
US9521186B2 (en) * 2007-09-13 2016-12-13 International Business Machines Corporation Method and system for file transfer over a messaging infrastructure
WO2009044232A1 (en) * 2007-10-02 2009-04-09 Nokia Corporation Ip mtu control based on multiradio schedule
CN101816206B (zh) * 2007-10-04 2014-10-08 Lm爱立信电话有限公司 针对服务gprs支持节点使用电路交换承载的系统间切换
KR100918961B1 (ko) 2007-10-09 2009-09-25 강릉원주대학교산학협력단 무선 통신망에서 동적 영역 압축 및 ncb 결정방법
KR101422012B1 (ko) * 2007-10-19 2014-07-23 엘지전자 주식회사 제어채널 생성 방법, 제어채널 복호화 방법, 이를 구현하는기지국 및 단말
US8797850B2 (en) * 2008-01-10 2014-08-05 Qualcomm Incorporated System and method to adapt to network congestion
US9705935B2 (en) * 2008-01-14 2017-07-11 Qualcomm Incorporated Efficient interworking between circuit-switched and packet-switched multimedia services
US20090185534A1 (en) * 2008-01-18 2009-07-23 Futurewei Technologies, Inc. Method and Apparatus for Transmitting a Packet Header
US9357233B2 (en) * 2008-02-26 2016-05-31 Qualcomm Incorporated Video decoder error handling
JP5115802B2 (ja) * 2008-03-11 2013-01-09 富士通株式会社 スケジューリング装置、スケジューリング方法、およびプログラム
CN101257366B (zh) * 2008-03-27 2010-09-22 华为技术有限公司 编解码方法、通讯系统及设备
US20090268732A1 (en) * 2008-04-29 2009-10-29 Thomson Licencing Channel change tracking metric in multicast groups
KR101367886B1 (ko) * 2008-05-07 2014-02-26 디지털 파운튼, 인크. 브로드캐스트 채널 상에서의 고속 채널 재핑 및 고품질 스트리밍 보호
KR101579136B1 (ko) * 2008-06-11 2016-01-04 코닌클리케 필립스 엔.브이. 미디어 스트림 구성요소들의 동기화
US20100003928A1 (en) * 2008-07-01 2010-01-07 Motorola, Inc. Method and apparatus for header compression for cdma evdo systems
US20100027524A1 (en) * 2008-07-31 2010-02-04 Nokia Corporation Radio layer emulation of real time protocol sequence number and timestamp
JP2010081212A (ja) * 2008-09-25 2010-04-08 Mitsubishi Electric Corp 音声伝送装置
US8966543B2 (en) * 2008-09-29 2015-02-24 Nokia Corporation Method and system to enable adaptation between physical bearers and OMA-BCAST
JP5135147B2 (ja) 2008-09-29 2013-01-30 富士フイルム株式会社 動画ファイル送信サーバおよびその動作制御方法
WO2010068151A1 (en) * 2008-12-08 2010-06-17 Telefonaktiebolaget L M Ericsson (Publ) Device and method for synchronizing received audio data with video data
US8204038B2 (en) * 2009-01-13 2012-06-19 Mediatek Inc. Method for efficient utilization of radio resources in wireless communications system
JP4650573B2 (ja) 2009-01-22 2011-03-16 ソニー株式会社 通信装置、通信システム、プログラム、および通信方法
WO2010101996A1 (en) * 2009-03-03 2010-09-10 Davenport Ronald R A wired internet network system for the internet video streams of radio stations
US8902995B2 (en) 2009-07-02 2014-12-02 Qualcomm Incorporated Transmitter quieting and reduced rate encoding
US8958475B2 (en) 2009-07-02 2015-02-17 Qualcomm Incorporated Transmitter quieting and null data encoding
US9112618B2 (en) * 2009-07-02 2015-08-18 Qualcomm Incorporated Coding latency reductions during transmitter quieting
KR101669533B1 (ko) * 2009-07-06 2016-10-26 삼성전자주식회사 무선통신 시스템에서 매체 접속 제어 계층 패킷을 구성하는 방법 및 시스템
CN102473188B (zh) 2009-07-27 2015-02-11 国际商业机器公司 用于转换存储的逻辑数据对象的方法和系统
CN101998508B (zh) * 2009-08-14 2013-08-28 华为技术有限公司 数据封装方法及装置
WO2011027936A1 (ko) * 2009-09-03 2011-03-10 에스케이 텔레콤주식회사 근거리 무선통신 기반 프로토콜의 상위에 탑재되는 전송계층의 헤더정보를 압축 및 해제하기 위한 시스템 및 방법, 그리고 이에 적용되는 장치
EP2302845B1 (en) 2009-09-23 2012-06-20 Google, Inc. Method and device for determining a jitter buffer level
WO2011068355A2 (ko) * 2009-12-01 2011-06-09 삼성전자 주식회사 상호 계층 최적화를 이용한 멀티미디어 데이터 패킷을 송신하는 방법 및 장치
US8780720B2 (en) 2010-01-11 2014-07-15 Venturi Ip Llc Radio access network load and condition aware traffic shaping control
US20110182257A1 (en) * 2010-01-26 2011-07-28 Qualcomm Incorporated White space spectrum commmunciation device with multiplexing capabilties
KR20110090596A (ko) * 2010-02-04 2011-08-10 삼성전자주식회사 지터 보정 방법 및 장치
EP2362653A1 (en) 2010-02-26 2011-08-31 Panasonic Corporation Transport stream packet header compression
CN101877643B (zh) * 2010-06-29 2014-12-10 中兴通讯股份有限公司 多点混音远景呈现方法、装置及系统
US8630412B2 (en) 2010-08-25 2014-01-14 Motorola Mobility Llc Transport of partially encrypted media
US8477050B1 (en) 2010-09-16 2013-07-02 Google Inc. Apparatus and method for encoding using signal fragments for redundant transmission of data
US20120243602A1 (en) * 2010-09-23 2012-09-27 Qualcomm Incorporated Method and apparatus for pipelined slicing for wireless display
US8736700B2 (en) * 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
US8595374B2 (en) * 2010-12-08 2013-11-26 At&T Intellectual Property I, L.P. Method and apparatus for capacity dimensioning in a communication network
CN103262639B (zh) * 2010-12-20 2016-08-10 雅马哈株式会社 无线音频传输方法
WO2012100201A1 (en) * 2011-01-21 2012-07-26 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
US8964783B2 (en) * 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) * 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US20130022032A1 (en) * 2011-01-26 2013-01-24 Qualcomm Incorporated Systems and methods for communicating in a network
US8856212B1 (en) 2011-02-08 2014-10-07 Google Inc. Web-based configurable pipeline for media processing
EP2490447A1 (en) * 2011-02-16 2012-08-22 British Telecommunications Public Limited Company Compact cumulative bit curves
JP2012222530A (ja) * 2011-04-06 2012-11-12 Sony Corp 受信装置及び方法、並びにプログラム
US8831108B2 (en) * 2011-05-04 2014-09-09 Cavium, Inc. Low latency rate control system and method
EP2547062B1 (en) * 2011-07-14 2016-03-16 Nxp B.V. Media streaming with adaptation
CN102325261A (zh) * 2011-09-14 2012-01-18 上海交通大学 立体视频采集合成系统的视间视频数据消抖同步方法
CN102521294A (zh) * 2011-11-30 2012-06-27 苏州奇可思信息科技有限公司 基于音频触发式课件的远程教育授课方法
US20130155918A1 (en) * 2011-12-20 2013-06-20 Nokia Siemens Networks Oy Techniques To Enhance Header Compression Efficiency And Enhance Mobile Node Security
CN103179094B (zh) * 2011-12-22 2019-10-01 南京中兴软件有限责任公司 Ip报文头的发送、接收方法、发送装置以及接收装置
CN103179449B (zh) * 2011-12-23 2016-03-02 联想(北京)有限公司 媒体文件的播放方法、电子设备和虚拟机架构
US8687654B1 (en) * 2012-01-05 2014-04-01 Google Inc. Method to packetize an encoded video frame
GB2498992B (en) * 2012-02-02 2015-08-26 Canon Kk Method and system for transmitting video frame data to reduce slice error rate
US20130223412A1 (en) * 2012-02-24 2013-08-29 Qualcomm Incorporated Method and system to improve frame early termination success rate
EP2648418A1 (en) * 2012-04-05 2013-10-09 Thomson Licensing Synchronization of multimedia streams
US9098596B2 (en) * 2012-04-10 2015-08-04 Cable Television Laboratories, Inc. Redirecting web content
US9204095B2 (en) * 2012-05-04 2015-12-01 Hong Jiang Instant communications system having established communication channels between communication devices
CN102665140B (zh) * 2012-05-16 2014-04-09 哈尔滨工业大学深圳研究生院 一种avs视频帧的rtp封装方法
CN103428523B (zh) * 2012-05-22 2015-07-08 华为技术有限公司 评估视频质量的方法和装置
US9142012B2 (en) 2012-05-31 2015-09-22 Apple Inc. Systems and methods for chroma noise reduction
US9332239B2 (en) 2012-05-31 2016-05-03 Apple Inc. Systems and methods for RGB image processing
US8953882B2 (en) 2012-05-31 2015-02-10 Apple Inc. Systems and methods for determining noise statistics of image data
US11089247B2 (en) 2012-05-31 2021-08-10 Apple Inc. Systems and method for reducing fixed pattern noise in image data
US8917336B2 (en) 2012-05-31 2014-12-23 Apple Inc. Image signal processing involving geometric distortion correction
US9014504B2 (en) 2012-05-31 2015-04-21 Apple Inc. Systems and methods for highlight recovery in an image signal processor
US8817120B2 (en) 2012-05-31 2014-08-26 Apple Inc. Systems and methods for collecting fixed pattern noise statistics of image data
US9105078B2 (en) 2012-05-31 2015-08-11 Apple Inc. Systems and methods for local tone mapping
US9077943B2 (en) 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
US9743057B2 (en) 2012-05-31 2017-08-22 Apple Inc. Systems and methods for lens shading correction
US9025867B2 (en) 2012-05-31 2015-05-05 Apple Inc. Systems and methods for YCC image processing
US9031319B2 (en) 2012-05-31 2015-05-12 Apple Inc. Systems and methods for luma sharpening
US8872946B2 (en) 2012-05-31 2014-10-28 Apple Inc. Systems and methods for raw image processing
US8863307B2 (en) * 2012-06-05 2014-10-14 Broadcom Corporation Authenticating users based upon an identity footprint
TWI513320B (zh) * 2012-06-25 2015-12-11 Hon Hai Prec Ind Co Ltd 視訊會議裝置及其唇形同步的方法
WO2014006837A1 (ja) * 2012-07-05 2014-01-09 パナソニック株式会社 符号化・復号化システム、復号化装置、符号化装置、及び符号化・復号化方法
US9661522B2 (en) 2012-07-09 2017-05-23 Cisco Technology, Inc. System and method associated with a service flow router
KR101947000B1 (ko) 2012-07-17 2019-02-13 삼성전자주식회사 방송 시스템에서 멀티미디어 데이터의 전송 특징 정보 전달 방법 및 장치
US20140142955A1 (en) * 2012-11-19 2014-05-22 Apple Inc. Encoding Digital Media for Fast Start on Digital Media Players
US20140192200A1 (en) * 2013-01-08 2014-07-10 Hii Media Llc Media streams synchronization
US20140310735A1 (en) * 2013-04-12 2014-10-16 Codemate A/S Flat rate billing of content distribution
US9532043B2 (en) 2013-08-02 2016-12-27 Blackberry Limited Wireless transmission of real-time media
FR3011155A1 (fr) * 2013-09-26 2015-03-27 Orange Procedes de synchronisation, de generation d'un flux, programmes d'ordinateur, media de stockage, dispositifs de restitution, d'execution et de generation correspondants.
US20150195326A1 (en) * 2014-01-03 2015-07-09 Qualcomm Incorporated Detecting whether header compression is being used for a first stream based upon a delay disparity between the first stream and a second stream
US9282171B2 (en) * 2014-03-06 2016-03-08 Qualcomm Incorporated Context establishment in marginal grant conditions
US9369724B2 (en) * 2014-03-31 2016-06-14 Microsoft Technology Licensing, Llc Decoding and synthesizing frames for incomplete video data
EP3146777B1 (en) 2014-05-22 2019-02-27 Kyocera Corporation Unlicensed frequency band with licensed frequency band timing
CN103986941A (zh) * 2014-05-28 2014-08-13 深圳市智英实业发展有限公司 一种无线音视频传输系统
EP3016432B1 (en) * 2014-10-30 2018-07-04 Vodafone IP Licensing limited Content compression in mobile network
US10129839B2 (en) * 2014-12-05 2018-11-13 Qualcomm Incorporated Techniques for synchronizing timing of wireless streaming transmissions to multiple sink devices
KR102349450B1 (ko) * 2014-12-08 2022-01-10 삼성전자주식회사 무결성 검사 데이터 제공 방법 및 장치
US9692709B2 (en) 2015-06-04 2017-06-27 Oracle International Corporation Playout buffering of encapsulated media
KR102402881B1 (ko) 2015-06-05 2022-05-27 한화테크윈 주식회사 감시 시스템
US9929879B2 (en) 2015-06-09 2018-03-27 Oracle International Corporation Multipath support of real-time communications
CN104980955A (zh) * 2015-06-19 2015-10-14 重庆市音乐一号科技有限公司 一种改善Wi-Fi Display传输速度的方法
WO2017008263A1 (en) * 2015-07-15 2017-01-19 Mediatek Singapore Pte. Ltd. Conditional binary tree block partitioning structure
CN105245273B (zh) * 2015-08-27 2017-12-12 桂林理工大学 一种照度均衡的rs232与vlc通信协议转换方法
EP3369212B1 (en) * 2015-10-26 2020-12-09 Telefonaktiebolaget LM Ericsson (PUBL) Length control for packet header sampling
GB201519090D0 (en) 2015-10-28 2015-12-09 Microsoft Technology Licensing Llc Multiplexing data
WO2017074811A1 (en) * 2015-10-28 2017-05-04 Microsoft Technology Licensing, Llc Multiplexing data
CN106817350A (zh) * 2015-11-30 2017-06-09 中兴通讯股份有限公司 报文处理方法及装置
US11924826B2 (en) 2015-12-10 2024-03-05 Qualcomm Incorporated Flexible transmission unit and acknowledgment feedback timeline for efficient low latency communication
US10332534B2 (en) * 2016-01-07 2019-06-25 Microsoft Technology Licensing, Llc Encoding an audio stream
KR101700370B1 (ko) * 2016-06-08 2017-01-26 삼성전자주식회사 지터 보정 방법 및 장치
KR102497216B1 (ko) * 2017-05-10 2023-02-07 삼성전자 주식회사 슬라이스 기반의 압축을 수행하는 영상 처리 장치 및 영상 처리 방법
US10367750B2 (en) * 2017-06-15 2019-07-30 Mellanox Technologies, Ltd. Transmission and reception of raw video using scalable frame rate
GB2564644B (en) * 2017-07-12 2020-12-16 Canon Kk Method and system of encoding a data stream according to a variable bitrate mode
EP3643074A4 (en) * 2017-08-25 2020-04-29 SZ DJI Technology Co., Ltd. SYSTEMS AND METHODS FOR SYNCHRONIZING FRAME SYNCHRONIZATION BETWEEN A PHYSICAL LAYER FRAME AND A VIDEO FRAME
EP3493535B1 (en) * 2017-11-29 2020-09-09 Mitsubishi Electric R & D Centre Europe B.V. Method for controlling a video encoder of a video camera installed on a moving conveyance
EP3902294A4 (en) 2017-12-13 2022-09-14 Fiorentino, Ramon INTERCONNECTED SYSTEM FOR THE WIRELESS TRANSMISSION OF HIGH QUALITY AUDIO AND VIDEO SIGNALS BETWEEN CONSUMER ELECTRONIC DEVICES
US10437745B2 (en) * 2018-01-05 2019-10-08 Denso International America, Inc. Mobile de-whitening
US10608947B2 (en) * 2018-02-26 2020-03-31 Qualcomm Incorporated Per-flow jumbo MTU in NR systems
KR102011806B1 (ko) * 2018-04-12 2019-08-19 주식회사 넷커스터마이즈 Udt 기반 트래픽 가속 방법
DE102018212655A1 (de) * 2018-07-30 2020-01-30 Conti Temic Microelectronic Gmbh Erkennung der Bewegungsabsicht eines Fußgängers aus Kamerabildern
US10834296B2 (en) * 2018-09-12 2020-11-10 Roku, Inc. Dynamically adjusting video to improve synchronization with audio
CN109618240A (zh) * 2018-10-26 2019-04-12 安徽清新互联信息科技有限公司 用于实时音视频传输的无线多信道自适应均衡方法
AU2020344540A1 (en) * 2019-09-10 2022-04-28 Sonos, Inc. Synchronizing playback of audio information received from other networks
CN111064541B (zh) * 2019-12-18 2021-05-11 中国南方电网有限责任公司超高压输电公司 一种高低速数据传输通道复用的方法
CN111131917B (zh) * 2019-12-26 2021-12-28 国微集团(深圳)有限公司 音频频谱实时同步方法、播放装置
CN111866753B (zh) * 2020-06-02 2021-06-29 中山大学 一种数字传输广播通信方法及系统
WO2021252548A1 (en) * 2020-06-08 2021-12-16 Sky Peak Technologies, Inc. Content shaping and routing in a network
KR102408433B1 (ko) * 2021-07-27 2022-06-10 한국항공우주연구원 다중 데이터 전송 방법 및 시스템
CN115484239B (zh) * 2022-09-15 2023-10-27 北京百度网讯科技有限公司 多媒体数据流的处理方法、装置、电子设备及存储介质

Family Cites Families (129)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4948019A (en) 1989-03-31 1990-08-14 Rodum Roland K Collapsible clothes hanger
JP2712656B2 (ja) 1989-10-25 1998-02-16 日本電気ホームエレクトロニクス株式会社 Cd―rom記録方法
AU2908492A (en) 1991-10-22 1993-05-21 Cae, Inc. Synchronous parallel electronic timing generator
AU5632394A (en) 1993-03-05 1994-09-08 Sony Corporation Apparatus and method for reproducing a prediction-encoded video signal
JP3364281B2 (ja) * 1993-07-16 2003-01-08 パイオニア株式会社 時分割ビデオ及びオーディオ信号の同期方式
JP3003839B2 (ja) * 1993-11-08 2000-01-31 エヌ・ティ・ティ移動通信網株式会社 Cdma通信方法および装置
US5541852A (en) * 1994-04-14 1996-07-30 Motorola, Inc. Device, method and system for variable bit-rate packet video communications
US5583652A (en) * 1994-04-28 1996-12-10 International Business Machines Corporation Synchronized, variable-speed playback of digitally recorded audio and video
US5510842A (en) 1994-05-04 1996-04-23 Matsushita Electric Corporation Of America Parallel architecture for a high definition television video decoder having multiple independent frame memories
US5646693A (en) 1994-11-04 1997-07-08 Cismas; Sorin Memory utilization for video decoding and display with 3:2 pull-down
KR0137701B1 (ko) * 1994-12-13 1998-05-15 양승택 엠피이지-2(mpeg-2) 시스템의 피이에스(pes) 패킷화 장치
FI114178B (fi) 1995-01-09 2004-08-31 Nokia Corp Radiokapasiteetin dynaaminen jakaminen TDMA-järjestelmässä
US5898695A (en) * 1995-03-29 1999-04-27 Hitachi, Ltd. Decoder for compressed and multiplexed video and audio data
US5914717A (en) 1995-07-21 1999-06-22 Microsoft Methods and system for providing fly out menus
KR0164184B1 (ko) 1995-08-31 1999-01-15 배순훈 동영상 압축디스크의 엔코딩제어장치
US5844600A (en) * 1995-09-15 1998-12-01 General Datacomm, Inc. Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network
KR970012585U (ko) 1995-09-21 1997-04-25 자동차용 선바이저
US6058141A (en) * 1995-09-28 2000-05-02 Digital Bitcasting Corporation Varied frame rate video
IT1281001B1 (it) 1995-10-27 1998-02-11 Cselt Centro Studi Lab Telecom Procedimento e apparecchiatura per codificare, manipolare e decodificare segnali audio.
US5570372A (en) * 1995-11-08 1996-10-29 Siemens Rolm Communications Inc. Multimedia communications with system-dependent adaptive delays
US5717464A (en) 1995-12-18 1998-02-10 Divicom, Inc. Rate control for a video encoder
IL117133A (en) * 1996-02-14 1999-07-14 Olivr Corp Ltd Method and system for providing on-line virtual reality movies
JPH09312656A (ja) * 1996-03-21 1997-12-02 Sony Corp 伝送装置およびその方法
US5867230A (en) * 1996-09-06 1999-02-02 Motorola Inc. System, device, and method for streaming a multimedia file encoded at a variable bitrate
US6041067A (en) * 1996-10-04 2000-03-21 Matsushita Electric Industrial Co., Ltd. Device for synchronizing data processing
US6473404B1 (en) * 1998-11-24 2002-10-29 Connect One, Inc. Multi-protocol telecommunications routing optimization
KR100204043B1 (ko) * 1996-11-28 1999-06-15 정선종 분산처리환경 상에서 오디오/비디오 데이타 전송을 위한 스트림 채널 형성방법
US6154780A (en) * 1996-12-18 2000-11-28 Intel Corporation Method and apparatus for transmission of a flexible and error resilient video bitstream
DE19652708C2 (de) * 1996-12-18 1999-08-12 Schott Glas Verfahren zum Herstellen eines befüllten Kunststoff-Spritzenkorpus für medizinische Zwecke
EP0861001B1 (en) 1997-02-07 2012-05-23 Texas Instruments Incorporated Error resilient video encoding
KR100223298B1 (ko) * 1997-02-12 1999-10-15 서평원 광대역 종합 정보 통신망의 터미널 정합 장치
US6542481B2 (en) * 1998-06-01 2003-04-01 Tantivy Communications, Inc. Dynamic bandwidth allocation for multiple access communication using session queues
US6181711B1 (en) * 1997-06-26 2001-01-30 Cisco Systems, Inc. System and method for transporting a compressed video and data bit stream over a communication channel
US6577610B1 (en) 1997-06-30 2003-06-10 Spacenet, Inc. Flex slotted Aloha transmission system and method
US6124895A (en) 1997-10-17 2000-09-26 Dolby Laboratories Licensing Corporation Frame-based audio coding with video/audio data synchronization by dynamic audio frame alignment
US5913190A (en) 1997-10-17 1999-06-15 Dolby Laboratories Licensing Corporation Frame-based audio coding with video/audio data synchronization by audio sample rate conversion
JP3407287B2 (ja) * 1997-12-22 2003-05-19 日本電気株式会社 符号化復号システム
WO1999044363A1 (en) * 1998-02-27 1999-09-02 Ridgeway Systems And Software Ltd. Audio-video packet synchronisation at network gateway
US6192257B1 (en) 1998-03-31 2001-02-20 Lucent Technologies Inc. Wireless communication terminal having video image capability
JPH11298878A (ja) 1998-04-08 1999-10-29 Nec Corp 画像スクランブル方法およびそれを実施する装置
FI106832B (fi) * 1998-06-10 2001-04-12 Nokia Networks Oy Suurinopeuksinen datasiirto matkaviestinjärjestelmässä
US6539011B1 (en) 1998-06-10 2003-03-25 Merlot Communications, Inc. Method for initializing and allocating bandwidth in a permanent virtual connection for the transmission and control of audio, video, and computer data over a single network fabric
US6085270A (en) 1998-06-17 2000-07-04 Advanced Micro Devices, Inc. Multi-channel, multi-rate isochronous data bus
US6496504B1 (en) * 1998-08-06 2002-12-17 Ricoh Company, Ltd. Smart allocation of bandwidth for multiple independent calls on a digital network
US6728263B2 (en) * 1998-08-18 2004-04-27 Microsoft Corporation Dynamic sizing of data packets
US6295453B1 (en) 1998-10-07 2001-09-25 Telefonaktiebolaget Lm Ericsson (Publ) Multi-full rate channel assignment for a cellular telephone system
JP2000175189A (ja) 1998-12-07 2000-06-23 Univ Tokyo 動画符号化方法およびそれに用いる動画符号化装置
JP3454175B2 (ja) 1998-12-24 2003-10-06 日本ビクター株式会社 画像情報送出装置
FI106998B (fi) * 1999-01-15 2001-05-15 Nokia Mobile Phones Ltd Bittinopeuden ohjaus multimedialaitteessa
US7016337B1 (en) 1999-03-02 2006-03-21 Cisco Technology, Inc. System and method for multiple channel statistical re-multiplexing
US6473442B1 (en) 1999-04-12 2002-10-29 Telefonaktiebolaget Lm Ericsson (Publ) Communications system and method for matching and balancing the bit rates of transport channels to the bit rate of a physical channel
KR100335441B1 (ko) 1999-05-01 2002-05-04 윤종용 다중 비디오 디코딩 장치 및 그 방법
KR100352981B1 (ko) 1999-05-21 2002-09-18 유혁 엠펙-1 데이터 전송 장치 및 그 방법
KR100608042B1 (ko) * 1999-06-12 2006-08-02 삼성전자주식회사 멀티 미디어 데이터의 무선 송수신을 위한 인코딩 방법 및그 장치
US6262829B1 (en) 1999-07-29 2001-07-17 Hewlett-Packard Co. Method of digital grayscale control using modulation of a slow-acting light source
US6680955B1 (en) * 1999-08-20 2004-01-20 Nokia Networks Oy Technique for compressing a header field in a data packet
FI107680B (fi) 1999-12-22 2001-09-14 Nokia Oyj Menetelmä videokuvien lähettämiseksi, tiedonsiirtojärjestelmä, lähettävä videopäätelaite ja vastaanottava videopäätelaite
TW512639B (en) 2000-01-14 2002-12-01 Interdigital Tech Corp Wireless communication system with selectively sized data transport blocks
GB0000873D0 (en) 2000-01-14 2000-03-08 Koninkl Philips Electronics Nv Interconnection of audio/video devices
US6996069B2 (en) 2000-02-22 2006-02-07 Qualcomm, Incorporated Method and apparatus for controlling transmit power of multiple channels in a CDMA communication system
JP2001245268A (ja) 2000-02-29 2001-09-07 Toshiba Corp コンテンツ伝送システム及びコンテンツ処理装置
DE60110303T2 (de) * 2000-03-03 2006-03-09 Ntt Docomo, Inc. Verfahren und Vorrichtung zur Paketübertragung mit Paketenkopfkompression
US6993009B2 (en) * 2000-03-10 2006-01-31 Hughes Electronics Corporation Method and apparatus for deriving uplink timing from asynchronous traffic across multiple transport streams
US20020114388A1 (en) 2000-04-14 2002-08-22 Mamoru Ueda Decoder and decoding method, recorded medium, and program
US7680912B1 (en) 2000-05-18 2010-03-16 thePlatform, Inc. System and method for managing and provisioning streamed data
US6535043B2 (en) 2000-05-26 2003-03-18 Lattice Semiconductor Corp Clock signal selection system, method of generating a clock signal and programmable clock manager including same
US7292772B2 (en) 2000-05-29 2007-11-06 Sony Corporation Method and apparatus for decoding and recording medium for a coded video stream
US7274679B2 (en) 2000-06-22 2007-09-25 Mati Amit Scalable virtual channel
US7149549B1 (en) 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
US6529527B1 (en) 2000-07-07 2003-03-04 Qualcomm, Inc. Method and apparatus for carrying packetized voice and data in wireless communication networks
JP4337244B2 (ja) 2000-07-25 2009-09-30 ソニー株式会社 Mpeg画像ストリームのデコード装置およびデコード方法
WO2002015564A1 (en) 2000-08-16 2002-02-21 Koninklijke Philips Electronics N.V. Method of playing multimedia applications
WO2002015591A1 (en) * 2000-08-16 2002-02-21 Koninklijke Philips Electronics N.V. Method of playing multimedia data
JP4731096B2 (ja) 2000-08-23 2011-07-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 通信システム及びデバイス
SE517245C2 (sv) * 2000-09-14 2002-05-14 Ericsson Telefon Ab L M Synkronisering av audio- och videosignaler
US6747964B1 (en) 2000-09-15 2004-06-08 Qualcomm Incorporated Method and apparatus for high data rate transmission in a wireless communication system
KR20020043139A (ko) 2000-12-01 2002-06-08 윤종용 이동통신시스템에서 고속 데이터 서비스를 위한 스케쥴링방법
US6920118B2 (en) * 2000-12-20 2005-07-19 Lucent Technologies Inc. Method and apparatus for communicating heterogeneous data traffic
US6904059B1 (en) 2001-03-06 2005-06-07 Microsoft Corporation Adaptive queuing
US6859500B2 (en) * 2001-03-20 2005-02-22 Telefonaktiebolaget Lm Ericsson Run-length coding of non-coded macroblocks
US20030016702A1 (en) 2001-03-30 2003-01-23 Bender Paul E. Method and system for maximizing standby time in monitoring a control channel
WO2002085030A1 (en) * 2001-04-11 2002-10-24 Cyber Operations, Llc System and method for preconditioning analog video signals
EP1380159A4 (en) * 2001-04-20 2008-01-09 France Telecom Res And Dev L L SYSTEMS TO ASSIGN THE STORED VIDEO IMAGES SELECTIVELY TO MARKERS, AND METHOD FOR OPERATING THEM
US7230941B2 (en) * 2001-04-26 2007-06-12 Qualcomm Incorporated Preamble channel decoding
US20020194606A1 (en) * 2001-06-14 2002-12-19 Michael Tucker System and method of communication between videoconferencing systems and computer systems
JP2003046949A (ja) * 2001-07-30 2003-02-14 Hitachi Ltd データ多重化方法、データ記録媒体、データ記録装置及びデータ記録プログラム
US7327789B2 (en) 2001-08-06 2008-02-05 Matsushita Electric Industrial Co., Ltd. Decoding apparatus, decoding method, decoding program, and decoding program storage medium
JP4647149B2 (ja) * 2001-08-06 2011-03-09 独立行政法人情報通信研究機構 トランスポートストリームの送信装置および受信装置
US6847006B2 (en) * 2001-08-10 2005-01-25 Semiconductor Energy Laboratory Co., Ltd. Laser annealing apparatus and semiconductor device manufacturing method
US20080002669A1 (en) * 2001-09-14 2008-01-03 O'brien Ray Packet voice gateway
US7336680B2 (en) 2001-09-18 2008-02-26 Scientific-Atlanta, Inc. Multi-carrier frequency-division multiplexing (FDM) architecture for high speed digital service
US6968091B2 (en) * 2001-09-18 2005-11-22 Emc Corporation Insertion of noise for reduction in the number of bits for variable-length coding of (run, level) pairs
US7075946B2 (en) 2001-10-02 2006-07-11 Xm Satellite Radio, Inc. Method and apparatus for audio output combining
AU2002343220A1 (en) 2001-11-09 2003-05-19 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and apparatus
US7453843B2 (en) 2001-12-11 2008-11-18 Texas Instruments Incorporated Wireless bandwidth aggregator
US7292690B2 (en) 2002-01-02 2007-11-06 Sony Corporation Video scene change detection
DE10300048B4 (de) 2002-01-05 2005-05-12 Samsung Electronics Co., Ltd., Suwon Verfahren und Vorrichtung zur Bildcodierung und -decodierung
US7130313B2 (en) 2002-02-14 2006-10-31 Nokia Corporation Time-slice signaling for broadband digital broadcasting
US7596179B2 (en) 2002-02-27 2009-09-29 Hewlett-Packard Development Company, L.P. Reducing the resolution of media data
FI114679B (fi) 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
FR2839407B1 (fr) * 2002-05-02 2004-12-17 Canon Kk Procede et dispositif d'ajustement de la taille maximale des sequences d'information transmises dans un reseau de telecommunications
US8699505B2 (en) * 2002-05-31 2014-04-15 Qualcomm Incorporated Dynamic channelization code allocation
US20030224806A1 (en) 2002-06-03 2003-12-04 Igal Hebron System and method for network data quality measurement
US6956875B2 (en) 2002-06-19 2005-10-18 Atlinks Usa, Inc. Technique for communicating variable bit rate data over a constant bit rate link
US7486678B1 (en) 2002-07-03 2009-02-03 Greenfield Networks Multi-slice network processor
WO2004008673A2 (en) * 2002-07-16 2004-01-22 Nokia Corporation Method for enabling packet transfer delay compensation in multimedia streaming
CN1221132C (zh) * 2002-07-30 2005-09-28 华为技术有限公司 实现多种视音频流格式转换的装置和方法
US7567509B2 (en) * 2002-09-13 2009-07-28 Dialogic Corporation Methods and systems for jitter minimization in streaming media
TW569556B (en) 2002-10-04 2004-01-01 Avid Electronics Corp Adaptive differential pulse-code modulation compression encoding/decoding method capable of fast recovery and apparatus thereof
US7191384B2 (en) * 2002-10-17 2007-03-13 Qualcomm Incorporated Method and apparatus for transmitting and receiving a block of data in a communication system
US7068708B2 (en) * 2002-12-13 2006-06-27 Motorola, Inc. Method and receiving unit for demodulating a multi-path signal
JP2004226272A (ja) 2003-01-23 2004-08-12 Seiko Epson Corp シミ欠陥の検出方法及び装置
EP2254299B1 (en) 2003-03-10 2020-04-29 Panasonic Intellectual Property Management Co., Ltd. OFDM reception device
US7535876B2 (en) 2003-04-01 2009-05-19 Alcatel-Lucent Usa Inc. Method of flow control for HSDPA and HSUPA
US7400889B2 (en) 2003-04-01 2008-07-15 Telefonaktiebolaget Lm Ericsson (Publ) Scalable quality broadcast service in a mobile wireless communication network
EP1616272A1 (en) * 2003-04-14 2006-01-18 Koninklijke Philips Electronics N.V. System and method for performing automatic dubbing on an audio-visual stream
US7391717B2 (en) 2003-06-30 2008-06-24 Microsoft Corporation Streaming of variable bit rate multimedia content
KR100651566B1 (ko) * 2003-08-26 2006-11-28 삼성전자주식회사 이동통신 단말기에서 출력 버퍼링을 이용한 멀티미디어재생 장치 및 그 제어 방법
KR20060134911A (ko) * 2003-09-02 2006-12-28 소니 가부시끼 가이샤 콘텐츠 수신 장치, 비디오 오디오 출력 타이밍 제어 방법및 콘텐츠 제공 시스템
US9351013B2 (en) * 2003-11-13 2016-05-24 Qualcomm Incorporated Selective and/or scalable complexity control for video codecs
US20050138251A1 (en) 2003-12-18 2005-06-23 Fanning Blaise B. Arbitration of asynchronous and isochronous requests
US20050172154A1 (en) 2004-01-29 2005-08-04 Chaoticom, Inc. Systems and methods for providing digital content and caller alerts to wireless network-enabled devices
US7599435B2 (en) 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7558221B2 (en) * 2004-02-13 2009-07-07 Seiko Epson Corporation Method and system for recording videoconference data
US7586882B2 (en) * 2004-03-19 2009-09-08 Telefonaktiebolaget Lm Ericsson (Publ) Higher layer packet framing using RLP
US7530089B1 (en) 2004-03-29 2009-05-05 Nortel Networks Limited System and method for improving video quality using a constant bit rate data stream
US7865255B2 (en) * 2004-03-31 2011-01-04 Mstar Semiconductor, Inc. Audio buffering system and method of buffering audio in a multimedia receiver
CN100576820C (zh) * 2004-05-07 2009-12-30 艾格瑞系统有限公司 与帧集合一起使用的mac报头压缩
EP1751955B1 (en) * 2004-05-13 2009-03-25 Qualcomm, Incorporated Header compression of multimedia data transmitted over a wireless communication system

Also Published As

Publication number Publication date
KR20090039809A (ko) 2009-04-22
ES2318495T3 (es) 2009-05-01
US10034198B2 (en) 2018-07-24
US20050259690A1 (en) 2005-11-24
KR20080084866A (ko) 2008-09-19
CN1973515B (zh) 2013-01-09
ES2354079T3 (es) 2011-03-09
JP2007537681A (ja) 2007-12-20
EP1751956A2 (en) 2007-02-14
EP2182734A1 (en) 2010-05-05
US9717018B2 (en) 2017-07-25
EP3331246A1 (en) 2018-06-06
WO2005115009A1 (en) 2005-12-01
CN1985477A (zh) 2007-06-20
CA2771943C (en) 2015-02-03
MY139431A (en) 2009-09-30
KR101049701B1 (ko) 2011-07-15
US9674732B2 (en) 2017-06-06
CA2565977A1 (en) 2005-12-01
BRPI0510961A (pt) 2007-11-20
TW201145943A (en) 2011-12-16
TWI353759B (en) 2011-12-01
EP2214412A2 (en) 2010-08-04
CN1969562B (zh) 2011-08-03
TWI394407B (zh) 2013-04-21
KR101068055B1 (ko) 2011-09-28
MXPA06013186A (es) 2007-02-14
WO2005114919A1 (en) 2005-12-01
JP2007537684A (ja) 2007-12-20
EP2262304B1 (en) 2012-08-22
JP2011142616A (ja) 2011-07-21
ATE484157T1 (de) 2010-10-15
ES2366192T3 (es) 2011-10-18
BRPI0510962A (pt) 2007-11-20
CN1985477B (zh) 2012-11-07
KR20070014201A (ko) 2007-01-31
EP1757027B1 (en) 2008-12-10
US20050259623A1 (en) 2005-11-24
US8089948B2 (en) 2012-01-03
CA2566126A1 (en) 2005-12-01
DE602005013517D1 (de) 2009-05-07
TWI381681B (zh) 2013-01-01
EP1751956B1 (en) 2011-05-04
CA2565977C (en) 2013-06-11
US8855059B2 (en) 2014-10-07
CN102984133B (zh) 2016-11-23
BRPI0510953A (pt) 2007-11-20
TW200618544A (en) 2006-06-01
TW200618564A (en) 2006-06-01
ATE426988T1 (de) 2009-04-15
EP1751987A1 (en) 2007-02-14
EP2182734B1 (en) 2013-12-18
CA2566124C (en) 2014-09-30
MY141497A (en) 2010-04-30
JP4554680B2 (ja) 2010-09-29
EP1751955B1 (en) 2009-03-25
WO2005114950A1 (en) 2005-12-01
US20050259613A1 (en) 2005-11-24
US20050259694A1 (en) 2005-11-24
MY142161A (en) 2010-10-15
ATE417436T1 (de) 2008-12-15
MXPA06013211A (es) 2007-03-01
MXPA06013193A (es) 2007-02-14
CN1977516A (zh) 2007-06-06
CA2566125C (en) 2012-01-24
DE602005027837D1 (de) 2011-06-16
CA2771943A1 (en) 2005-12-01
KR20070014200A (ko) 2007-01-31
KR100870215B1 (ko) 2008-11-24
CA2566124A1 (en) 2005-12-01
KR100918596B1 (ko) 2009-09-25
WO2005114943A3 (en) 2006-01-19
JP2007537682A (ja) 2007-12-20
CA2811040A1 (en) 2005-12-01
WO2005114943A2 (en) 2005-12-01
BRPI0510952A (pt) 2007-11-20
EP1751987B1 (en) 2010-10-06
EP1757027A1 (en) 2007-02-28
KR100906586B1 (ko) 2009-07-09
JP4361585B2 (ja) 2009-11-11
US20140362740A1 (en) 2014-12-11
CN1973515A (zh) 2007-05-30
DE602005011611D1 (de) 2009-01-22
EP2214412A3 (en) 2012-11-14
CN102984133A (zh) 2013-03-20
US20150016427A1 (en) 2015-01-15
EP2262304A1 (en) 2010-12-15
CN1977516B (zh) 2010-12-01
CN1969562A (zh) 2007-05-23
KR100871305B1 (ko) 2008-12-01
ES2323011T3 (es) 2009-07-03
TW200623737A (en) 2006-07-01
CA2566125A1 (en) 2005-12-01
EP2592836A1 (en) 2013-05-15
DE602005023983D1 (de) 2010-11-18
KR20070023731A (ko) 2007-02-28
JP4448171B2 (ja) 2010-04-07
JP2007537683A (ja) 2007-12-20
EP1751955A1 (en) 2007-02-14
MXPA06013210A (es) 2007-02-28
ATE508567T1 (de) 2011-05-15
BRPI0510952B1 (pt) 2019-09-03
KR20070013330A (ko) 2007-01-30

Similar Documents

Publication Publication Date Title
JP5356360B2 (ja) 無線通信システムにおけるオーディオおよびビデオデータの同期
Garudadri et al. Video transport over wireless networks
TWI416900B (zh) 用以配置資訊至一通信系統之通道之方法及裝置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130108

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130404

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130409

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130610

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130613

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130708

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130730

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130828

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees