JP2009512279A - ストリーミングと制御処理に異なる素子を用いたメディアデータ処理 - Google Patents
ストリーミングと制御処理に異なる素子を用いたメディアデータ処理 Download PDFInfo
- Publication number
- JP2009512279A JP2009512279A JP2008534731A JP2008534731A JP2009512279A JP 2009512279 A JP2009512279 A JP 2009512279A JP 2008534731 A JP2008534731 A JP 2008534731A JP 2008534731 A JP2008534731 A JP 2008534731A JP 2009512279 A JP2009512279 A JP 2009512279A
- Authority
- JP
- Japan
- Prior art keywords
- data
- packet
- packets
- streaming
- rtp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 108
- 230000015654 memory Effects 0.000 claims abstract description 72
- 230000008859 change Effects 0.000 claims abstract description 12
- 230000005540 biological transmission Effects 0.000 claims description 64
- 238000000034 method Methods 0.000 claims description 64
- 230000006870 function Effects 0.000 claims description 52
- 230000008569 process Effects 0.000 claims description 30
- 238000004891 communication Methods 0.000 claims description 20
- 239000013589 supplement Substances 0.000 abstract 1
- 238000012546 transfer Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 14
- 230000008901 benefit Effects 0.000 description 9
- 230000003252 repetitive effect Effects 0.000 description 7
- 238000013500 data storage Methods 0.000 description 4
- 238000012790 confirmation Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000036961 partial effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000002829 reductive effect Effects 0.000 description 2
- 238000010187 selection method Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000004064 recycling Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000002459 sustained effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
- H04L67/63—Routing a service request depending on the request content or context
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/102—Gateways
- H04L65/1023—Media gateways
- H04L65/103—Media gateways in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/102—Gateways
- H04L65/1033—Signalling gateways
- H04L65/104—Signalling gateways in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1101—Session protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/752—Media network packet handling adapting media to network capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2383—Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4135—Peripherals receiving signals from specially adapted client devices external recorder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4381—Recovering the multiplex stream from a specific network, e.g. recovering MPEG packets from ATM cells
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/6437—Real-time Transport Protocol [RTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/16—Analogue secrecy systems; Analogue subscription systems
- H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Multi Processors (AREA)
Abstract
ハードウエアでアクセラレートされたストリーミング装置であり、特に、制御パケットから部分的に決定され、ストリームコンテンツのパケットに関連したヘッダを変更したり、補足したりするために使用される、アドレッシング及び取り扱い基準を用いて、ソースと目的地の間で一つ以上のストリームのデータパケットを方向付ける、RTPリアルタイムプロトコルストリーミングに関する装置である。プログラムされた制御処理装置はRTCP又はRTSPフォーマットの制御パケットに反応し、RTPパケットの取り扱い又は方向を変えることが出来る。制御処理装置は、ハードウエアアクセラレータにアクセス可能なメモリ内に新しいアドレッシング及び取り扱いに関する基準につていのデータを格納し、該メモリは、同時に多数の進行中のストリームに関する基準を格納するように構成される。コンテンツパケットが到着すると、ネットワークアクセラレータにより、制御処理装置による演算の必要なく、パケットのアドレッシング及び取り扱い基準がメモリから見いだされ、適用される。ネットワークアクセラレータは、ストリームが継続する限り、与えられたストリームのパケットに基準を、繰り返し適用し続けるように運転され、高いデータ伝送速度のパイプラインとして運転することが出来る。処理装置は、ネットワークアクセラレータによって行なわれることとなる反復的な処理から解放されるので、必要ならば高い演算能力を用いて、多様な方法で基準を変更するようにプログラムすることが可能である。
Description
[関連出願のクロスリファレンス]
本出願は、2005年10月7日出願の、米国仮特許出願第60/724,462、2005年10月7日出願の、米国仮特許出願第60/724,463、2005年10月7日出願の、米国仮特許出願第60/724,464、2005年10月7日出願の、米国仮特許出願第60/724,722、2005年10月7日出願の、米国仮特許出願第60/725,060、及び2005年10月7日出願の、米国仮特許出願第60/724,573の利益を要求するものである。これらの出願はここで、参照することで、全体が明示的に組み込まれることとなる。
本出願は、2005年10月7日出願の、米国仮特許出願第60/724,462、2005年10月7日出願の、米国仮特許出願第60/724,463、2005年10月7日出願の、米国仮特許出願第60/724,464、2005年10月7日出願の、米国仮特許出願第60/724,722、2005年10月7日出願の、米国仮特許出願第60/725,060、及び2005年10月7日出願の、米国仮特許出願第60/724,573の利益を要求するものである。これらの出願はここで、参照することで、全体が明示的に組み込まれることとなる。
[発明の背景]
本発明は、リアルタイムデータ転送装置及び方法に係わり、デジタルビデオ処理センタや娯楽システムにおいて、RTPストリーミングを用いた会議システム又は他の応用に関する。本発明はまた、制御プロセッサのプログラムにより、ソースと行き先の間の転送結合が開始され、停止されまた時々変更される、パケットデータ転送処理に一般的に適用可能である。
本発明は、リアルタイムデータ転送装置及び方法に係わり、デジタルビデオ処理センタや娯楽システムにおいて、RTPストリーミングを用いた会議システム又は他の応用に関する。本発明はまた、制御プロセッサのプログラムにより、ソースと行き先の間の転送結合が開始され、停止されまた時々変更される、パケットデータ転送処理に一般的に適用可能である。
本発明の装置及び方法は、多様な記録、再生及び処理機能を提供することが出来、そこではコンテンツ及び制御情報が、データを格納し、提示し、処理する機能的な素子との間で遣り取りされる。発明の観点に基づくと、データ転送速度に関して特に要求される反復されるデータ処理転送機能は、コンピュータ的には複雑なものではない。例えば、ネットワーク接続された格納素子から又は格納素子に対するデータパケットの繰り返されるルーティングは、コンピュータ的に複雑ではあるが比較的に低頻度な制御処理やアドレッシングステップのような機能からは離れて扱われる。好ましい装置においては、ハードウエア装置を構成するアクセラレータが制御処理装置とネットワーク接続されたデータ格納装置間のデータ通信に使用される。アクセラレータは転送機能を実質的な目的としており、これにより、処理装置に、変化する要求に幅広く最適な方法で応答することを確保しつつ、高いデータ処理速度を達成している。
一般的に、異なる可能性を有するデータフォーマットを用いて異なる可能性を有する装置で情報交換が可能となるとが都合がよい。異なる装置及びデータフォーマットを高いデータ転送速度で用いつつ、データ処理システム内での汎用性を持たせる必要性から設計的な挑戦が生じている。産業規格が一定のデータ形式のフォーマットを決定している。規格は、アドレッシング及び信号技術、データ貯蔵及び復旧、通信、その他に関するものである。規格は、複合的なレベルで適用される。例えば、パケット送信規格又はプロトコルは、ビデオエンコード規格などに基づいてエンコードされたビデオデータをトランスポートする際に使用される。
ソースから目的地の間で伝達されたパケットデータは、よく、データフォーマット変換、演算、バッファリング及び同様な処理及び/又は格納ステップなどの中間処理ステップの対象となる。並列サーバ及び端末装置を有するデータ処理システムにおいては、演算負荷の一部はデータフォーマット及びリフォーマットに関連する動作に繋がっている。負荷の一部はデータソースと目的地間のアドレッシング及び切り替えであり、ユーザの選択など状況に対応した変更処理でもあり得る。
使用可能なデータ処理及び通信機能のいくつかは繰り返しの多い処理であり、そこではシーケンシャルなデータパケットが、ソースから目的地まで、全く同じ伝達方法で処理される。これらの機能は、データパイプライン構成を合理化し、単純化して速度を最大化する利益を生じさせる。
他のデータ処理及び通信機能はより管理的であり、計算型に重きがある。例えば、データフローパスを再構成してソースと目的地ノードとの間で加え、除去し又は切替え、又は機能を切替える際に、制御プロセッサは、一つ一つのパケットに対して反復的にアドレスなどを調整するほかに、他の多様なステップを実施する。これらの機能は多様性を有するが、プログラム的及び計算的な複雑性を持つ。
スピードに関して合理化し、単純化する目的は、計算的な複雑性をもたらすことに対して、勿論、矛盾した設計上の目標である。計算的なパワーの必要性に対して、速度及びデータ容量についての並行的な要請を最適化し、早くて多用途な装置を提供することは、重要である。本発明はデータ転送に必要なある機能を、グループに細分化する。比較的単純で高速な、典型的な反復機能は、ハードウエア、即ちハードウエアネットワークアクセラレータに部分的に、また全体的に導入することが出来るアクセラレータ素子に使用される。比較的複雑で順応性のある計算的な機能は制御プロセッサに使用され、実質的にソフトウエアにより実施される。こうした機能の中で、制御プロセッサは、連続するパケットの伝送を含む特定の処理の間、反復的に使用される宛先情報などの条件及び要素をハードウエアネットワークアクセラレータにセットアップし格納する。
好適な実施例では、本発明はリアルタイムプロトコル(RTP)パケットストリーミングに関して説明される。パケットソースと目的地タイプの好適なグループは検討され、娯楽や遠隔会議に関するビデオデータ処理に適用することが出来るが、潜在的には警備上のモニタ、ゲームシステム及びその他の用途も含むものである。伝達経路は有線又は無線、及び企業又は公共ネットワークを含むことが出来る。再生用端末は、オーディオ及びビデオ娯楽システム、コンピュータワークステーション、固定又は携帯装置で構成することが出来る。データはネットワークサービスを使用しながら格納され、処理される。好適な通信システムはローカル及びワイドエリアネットワーク、ケーブル及び遠距離通信会社のネットワーク、その他を含むものである。
オーディオ及びビデオデータに関連して、リアルタイムプロトコル(“RTP”、“リアルタイム伝送プロトコル”としても知られている)は、パケット化されたオーディオ及び/又は画像及び動画データをデータ通信ネットワーク上で、リアルタイムデータ速度で移動させるのに適している。オーディオ及びビデオデータのリアルタイム又はリアルレートでの再生は、コンテンツの停止及び開始を避ける一方で、バッファに格納する必要性を最小限にすることが望ましい。遠隔会議や同様な通信の用途においては、パケット化されたデータの収集、処理、伝送及び読み出しは、顔を合わせた形のリアルタイム会議及び会話を矛盾しない、遅滞のないまた欠落のないものとすべきである。
RTPリアルタイムプロトコルは、オーディオ及びビデオを含むリアルタイムデータを能率的に取り扱うことを容易にするものである。それはインターネット電話などの相互サービスは勿論、メディアオンデマンドにも使用することができる。それは、オーディオ及びビデオを、多様なソース及び目的地に、また、多様なソース及び目的地から導くために使用して、同時処理を伴うプレゼンテーション及び/又は記録を可能とする。
データが取り扱われる方法は、制御及びアドレッシング機能を使用して、例えば特定のソース、目的地及び参加者を含んだ接続を開始し、また終了するなどにより、時々変更することが出来る。このように、RTPは内容を伝送するためのデータ内容部、及び、スタート、ストップ及びアドレッシングを含む、データを取り扱う方法を変えることに関する制御部分を含む。RTPの制御部分は、リアルタイムコントロール部ということで“RTCP”と呼ばれる。
RTPのデータ部分は薄い又はすっきりとしたプロトコルであり、連続的なメディア(例えば、オーディオ及びビデオ)の伝送などのリアルタイム特性を持った用途をサポートするために使用される。このサポートは、タイミングの生成、喪失の検出または回復、セキュリティ、内容の確認及び同様な機能を含むものであり、それらは繰り返しが多く、メディア内容の伝送に伴って実質的に連続して生じる。
RTCインターネットなどの通信ネットワーク内で、あらゆる大きさのグループのリアルタイム会議をサポートする。これにはソースの確認及びマルチキャストからユニキャスト翻訳及びオーディオ及びビデオブリッジのようなゲートウエイをサポートすることを含む。RTCは、異なるメディアのストリームを同期させるサポート及びマルチキャストグループへ受信者からのサービス品質のフィードバックを提供する。
RTP及びRTCPは上記したタイプのデータ伝送を容易にするように特に作られたプロトコルであるが、与えられたネットワーク構成内では、RTP及びRTCPプロトコルはより高位又は低位のプロトコル及び規格と関連するかもしれない。より高位の場合、例えば、RTP及びRTCPプロトコルは、ビデオ会議システム又はビューアンドストア(view-and-store)又はデータを扱う他の技術で活用されるために使用されるかもしれない。より低位又はよりベーシックなレベルでは、RTP及びRTCPデータ伝送に使用されるパケットは、実際には異なるパケット伝送メッセージプロトコルに基づいて伝送されるかもしれない。例としては、伝送制御プロトコル(TCP又はインターネットでは、TCP/IP)及びユーザデータグラムプロトコル(UDP)である。
TCP及びUDPプロトコルは共にパケット伝送に関するものであるが、それらはパケットの基準及びエラーチェッキング、ロストパケットに対する感度及びその他の点に関して実質的に異なる特性を有する。伝送中に二通りの接続が維持され、また全ての関連するパケットが伝送され、受信側で組み立てられるまで、該接続は維持され、多分、失われた又は損傷を受けたパケットを再度得るようにリトライすることもある、そうしたことを保証するために、一般的にTCPはそうしたプロトコルの性質を使用する。UDPは、一般的には、パケット伝送行為を扱うが、パケットを送り及び受取り、全ての必要なパケットが送られ及び受け取られることを保証するまでの運用である。テレビ会議画像のストリーミングのような、いくつかのアプリケーションでは、中間で脱落したパケットに対してそれほど神経質ではない。しかし、仮にパケットが脱落したとしても、ストリーミングが可能な限りとぎれることなく続くことが重要である。
より高位及びより低位のプロトコルの幅広い範囲を使用しリアルタイム伝送が可能な技術が開発され、その構成が、異なるプロトコルが異なる方向で十分利点を得ることが出来るとすることが望ましい。通信に利用できる資源及び演算に利用できる資源及び状況に敏感な切替え及び決定することが、最適化されるように処理を構成することが、高いパフォーマンス又は高い要求システムにおいて特に有効である。
[要約]
本発明の観点は、明確で同時に運転される伝送データ経路と制御データ経路を有するデータ処理装置を用いて、ビデオ及び類似した連続的なストリームデータ処理を提供するものであり、そこでは、二つのデータ経路が、スループット力及び処理力がそれぞれに分離して構成された別個に協働するリソースを用いて、データスループットに集中した機能とデータ処理に集中した機能を別個に取り扱う。
本発明の観点は、明確で同時に運転される伝送データ経路と制御データ経路を有するデータ処理装置を用いて、ビデオ及び類似した連続的なストリームデータ処理を提供するものであり、そこでは、二つのデータ経路が、スループット力及び処理力がそれぞれに分離して構成された別個に協働するリソースを用いて、データスループットに集中した機能とデータ処理に集中した機能を別個に取り扱う。
特に、リアルタイムプロトコル(RTP)に関連するリソースの集中した処理の一部を分割することで、メディアサーバにより行なわれる処理を容易化し、高速化し、割り当てられた一部の処理に関しては最適化された処理装置及びスイッチング装置によって取り扱う、方法及び装置を提供することである。速度に基づいて分割された機能は、データパイプラインの特性を持った装置に割り当てられる。計算型負荷は、RTPセッションを制御し、データ通信パイプライン内のストリーミングデータの移動に余り関わることのない計算側を取り扱う、一つ以上の中央処理装置に割り当てられる。
ある実施例は、中央処理装置の制御の下で送り、又受け取った選択されたパケット内のヘッダデータを繰り返し置き換えるハードウエアインターフェースを用いることに関する方法である。中央処理装置は、特定のアドレスへルート付けるなど、ある方法で取り扱うための、ある判明した属性を持ったパケットについて調整するような、基準を設定することが出来る。この基準は、ハードウエアインターフェース素子を制御するために中央処理装置に格納される。ハードウエア素子は、伝送データにその結果を組み込む。これは、連続的な各パケットヘッダのヘッダデータ値を、制御処理装置に起因する結果のデータとして生成されるか、制御処理装置から読み出される形で受け取ったデータと差し替えること含むものである。
ハードウエアインターフェース素子は、実質的な管理を受けることなく、高いデータ伝送速度で、RTPパケットのストリーミングを、オーディオビジュアルプレゼンテーション装置及びストレージ装置に接続されたネットワークなどの目的地とソースの間で制御することが出来る。こうして、ハードウエアインターフェース素子はデータの取り扱いを高速化することが出来る。また、同時に、制御処理装置は、ハードウエアアクセラレータにより達成されている、あるヘッダ値を明確な置換値に置換するよりも、より演算型に集中した機能に向けたものにその注意を向けることが出来る。
アドレスされたデータパケットの伝送に基づいたデータストリーミング装置においては、装置がローカルな又はワイドエリアのネットワークを含むものであろうと無かろうと、反復されるストリーミング機能に関連するデータパケットを搬送する同じデータパスが、該データストリーミングを管理するために必要な、計算型が要求される機能に関連する、制御及びアドレッシングパケットもまた運んでいる。本発明によると、連想メモリ(CAM)ファイルが保持され、ハードウエアアクセラレータが、あるアドレスを持った多数の現在維持されているパケットキューと、該連想メモリ(CAM)ファイルにより関連付けられている。SETUP要求が受け取られ、新たなエンドポイントに向けた新しいストリーミング接続が開始される際には、CAMファイルには、適合する入力が無い。ハードウエアアクセラレータは、関連するヘッダ値を提供する、即ち、RECORD又はSENDメッセージを予想して、連想メモリ(CAM)内に項目(入り口)を生成する。新しいエンドポイントに関連したヘッダ値は、制御処理装置には既知のものであるが、該処理装置は連想メモリ(CAM)内に新しいパケットキューをセットアップすることで、新しいエンドポイントへのルートを設立することだけが必要となる。これで、ハードウエアアクセラレータは、入ってくるパケットに関するパケットキューの項目(入り口)を見つけ、必要な値を差し替え、該パケットをその目的地に向けて通過させる自動機械として動作することが可能となる。
設立された待ち行列(キュー)の項目(entry)を持ったRTSP又はSENDメッセージが受け取られると、外に出されるヘッダ値を決定する責任は、トラフィックマネージャ及び中央処理装置とのデータ通信において、ハードウエアアクセラレータにある。接続は、高いデータ転送率と共に、運転中、完了するまで、又は中央処理装置が必要な新しい制御や動作、例えば、プログラムの何らかの機能に従ってストリームのエンドポイントを決定するようなこと、を開始するまで、維持することが出来る。機能は、多くの又は全ての機能を含んでおり、さもなければ、制御装置は各通過パケットをどのように取り扱うかをプログラムのソフトウエアルーチンを介して決定する必要がある。こうした機能は、ソースと目的地との間のパケットのルーティイング、中間処理ステップを挿入すること、同時に二つ以上の目的地にパケットをルーティイングすること、例えば、再生中の記録などを含む。
特定のヘッダ値を格納された値に置換する連想メモリの技術は、比較的機械的なものであり、素早く行なうことが出来る。ある種のRTP機能、例えば、RTP終了ルーチンなどは、複数のパケットを巻き込むものであり、1対1の交換ではないので、また、多分、格納された値に基づいて置き換るよりは複雑な条件付きのステップがあることから、幾分か複雑であり、ハードウエアでは自由に扱えないことがある。
一方、ストリームのスループット要求は厳格である。このスループットに合わせるために、従来は、プログラム実行中の計算型負荷とヘッダ値の置換の両方を実行するに必要な、極めて高速で、計算能力のある中央処理装置が必要であった。中央処理装置が置換値と基準を提供した後にヘッダ値の置換を扱うためにハードウエアアクセラレータを用いることが本発明の観点である。
一旦、パケット待ち行列(キュー)の項目(entry)が設定されると、ストリーム中の各パケットは最初にネットワークアクセラレータ、即ち、ハードウエアで実質的に実行される高速ユニットに入る。アクセラレータは、連想メモリCAMの接続テーブル内の情報とパケットを照合し、層3(レイヤ3)及び層4(レイヤ4)を除去し(例えば)、新しいローカルヘッダを挿入する。今や、潜在的に変わったローカルヘッダ、RTPヘッダ及びRTPペイロードを含んだパケットは、トラフィックマネージャを通して、その目的地、例えば、RECORD運転中のアドレスされたディスクへ書き込まれるたり、再生中の何らかの他のアドレス又はプレゼンテーション装置へ送られる形で、送られ、一度に二つ以上のそうした運転を行なう。
本発明の方法の利点は、入ってくるRTPトラフィックを扱うことが出来、最終的にソフトウエアで制御できる点である。仮に、新しい異なるRTPペイロードタイプが使用されるようになり、また、知られたペイロードタイプの定義が変わっても、それらをサポートすることがストリーマにより行なうことが出来る。加えて、パーソナルビデオ記録(PVR)において特に望まれていた機能である、記録中の遅延再生(Delayed-view-while-recording)をとても効率的にサポートすることが出来る。
本発明の技術の欠点は、RTPローカルヘッダフォーマットでオブジェクトを格納すると、該オブジェクトがHTTP伝送にとってアクセスが出来なくなることであり、また、ある状況では、効果を取り消すための操作が必要となることである。しかし、non−RTPクライントに直ちに利用可能なオブジェクトを作る為に直ちに、又はリソースが利用可能となったとき、及び/又はオブジェクトの要求が生じた時に、ホスト処理装置の適当なソフトウエアルーチンをオリジナルのメディアオブジェクトを再構成する為に使用することが出来る。
これらの及び他の目的及び観点は、好適な実施例の以下の議論により明らかとなる。
[図面の簡単な説明]
図面に本発明の好適で、例示的であり限定的ではない実施例を示す。しかし、排他的な権利が要求されている発明の範囲を決定するためには、添付したクレームを参照すべきである。図面は、以下のようなものである。
図面に本発明の好適で、例示的であり限定的ではない実施例を示す。しかし、排他的な権利が要求されている発明の範囲を決定するためには、添付したクレームを参照すべきである。図面は、以下のようなものである。
図1は、本発明による、ソースから目的地へのデータ伝送関係(例えば、サーバからクライアント)を示すブロック図であり、RTPデータコンテンツ成分は、RTSP及び/又はRTCP制御信号を扱う中央処理装置などの制御ポイントの周囲を回って伝送される。
図2は、本発明によるストリーミング制御装置を示すブロック図である。
図3は、RTPヘッダの成分値を示す図表である。
図4は、ローカルアドレスヘッダを有する、前に付加されたRTPヘッダを示すデータ図表である。
図5は、連想メモリを用いて中央処理装置から最初に得た値を何度も適用する、データフロー及びデータ成分を示すブロック図である。
図6は、データストリーミング接続のセットアップを実行し、該接続を維持する機能を示す理論フローチャートである。
図7は、本発明のパケットデータ取り扱い装置を含むように構成された娯楽システム“HNAS”の構成要素を示すブロック図である。
図8は、異なったオフセットを持ったプロトコルが連結される時に適用することの出来るヘッダーオフセットの付加及び、パケットの宛先が該オフセットで決定される方法を示すものである。
図9は、好ましい装置に基づく連想メモリの多段接続を示す回路構成図である。
図10は、本発明の運用によりデータパケットに適用される、ローカルヘッダの配置を示す、データ図表である。
[好適な実施例の詳細な記述]
リアルタイムプロトコル又はRTPは、リアルタイムデータ、例えば、マルチキャスト又はユニキャストネットワークサービス上のオーディオ、ビデオ又はシミュレーションデータのような、リアルタイムデータ伝送用に適した、端末同士のネットワーク伝送機能を提供する。
リアルタイムプロトコル又はRTPは、リアルタイムデータ、例えば、マルチキャスト又はユニキャストネットワークサービス上のオーディオ、ビデオ又はシミュレーションデータのような、リアルタイムデータ伝送用に適した、端末同士のネットワーク伝送機能を提供する。
RTPはリソースリザベーションをアドレスしないし、RTPプロトコルレベルでの接続の維持及びパケットのロストなどの保証など、リアルタイムサービスにおけるサービスの質を保証することはない。データ伝送制御、即ちRTPは、セッション制御(即ち、ソースから目的地までのRTP伝送)及び全体のプレゼンテーション制御プロトコル(RTSP)などに使用することの出来る制御プロトコル(RTCP)により改良される。
RTCP及びRTSP制御プロトコルは、伝送経路を構築し、又は分解する際、例えば一方向(再生)又は他の方向(記録)への伝送を開始するとき、一時停止などの時に伝達される信号パケットを含む。コンテンツデータパケットは、なんらかの同期基準を持ったリアルタイムで出来る限り連続的な流れである必要がある。コンテンツパケットはRTCP及びRTSTパケットとして同時に伝送されるが、これら3つの各プロトコルのパケットは異なってアドレッシングされた論理接続又はソケットを使用する。
RTSC/RTSP制御及びRTPデータストリーミングプロトコルは共に、大きなマルチキャストネットワークに対して大きさの変更が可能なツールを供給する。RTP及びRTCPは基本的な伝送及びネットワーク層とは独立した形で設計されており、従って多様な互換可能なそうした層を使用することが出来る。該プロトコルは、望むならば、RTPレベルの受信中継器やミキサの使用をサポートする。
RTP制御(RTCP)は、サービスの質をモニタすることが出来、進行しているセッションにおいて、参加者についての情報を運ぶことが出来る。参加者の情報は、例えば、明確なメンバーシップ制御及び機構がない、“緩やかに制御された”セッションにとって十分であるが、使用されているアプリケーションが、通常RTSPセッション制御プロトコルの領域である、認証やコミュニケーションを要求することがある。
ソースと目的地間を流れるRTPデータ内容パケットは、リアルタイムで、目的地のアドレスに向けて単に通過してゆく。パケットがリアルタイムで通過するので、受信装置ではメモリにバッファする必要はほとんどない。いくつかの理由から、通常、送出装置は一時ファイルを生成する必要がない。HTTPオブジェクト伝送などの、いくつかの他のプロトコルとは異なり、RTPはメディア特定ヘッダを有するオブジェクトを分解する。RTP受信機は、リトライ信号送出機能を持つよりもむしろパケットロスを回復するように構成されている。RTP伝送は、TCP/IPの無接続プロトコルを使用することが出来る。通常、RTP伝送は、RTPデータをユーザデータグラムプロトコル(UDP)パケット伝送することで行なわれ、通常、各UDPパケットが一つのRTPパケットを構成する必要はない。
一つのRTPパケットは、該パケットがRTPであることを示す固定ヘッダを有している。それは、パケット順序番号、タイムスタンプ、同期ソース(SSRC)識別子、コントリビューティング(寄与)ソース(CSRC)識別子の潜在的な空席リスト及びペイロードデータである。ペイロードデータは、オーディオサンプル又は圧縮されたビデオデータなどの、データの値に与えられた数を含む。
個別のリアルタイムデータコンテンツパケット(RTP)に対して制御(RTCP)及び/又はセッション制御(RTSP)パケットを使用するシステムは、全ての3タイプ又はパケットが同じデータ経路上で送られ、受け取られるが、周波数と機能の点でやや相違する。ネットワークに接続された娯楽システム、ビデオ会議システム、ネットワークに接続されたメモリ装置などの、受信装置内に処理装置を設けることが出来、該処理装置をプログラムしてRTPパケットとRTCP又はRTSP制御パケットを適宜区別することが出来る。データパケットはそれらの目的地へ向けて通過され、制御パケット処理装置により他のプログラムされた機能を達成すべく、また情報の伝達を達成すべく使用される。そうしたシステムでは、速度を保持すべく、中央処理装置では、RTPデータパケットをリアルタイムで通過させるために高いデータ転送速度で運転する必要がある。処理装置は、また、潜在的に必要な制御工程を取り扱うために必要な、計算的な複雑性及びプログラミングを持つ必要がある。処理装置は早くしかも能力のあるものである必要がある。しかし、こうしたことはあまり比較されることはないが、処理装置の計算における複雑性は、単にRTPパケットを通過させる時には使用されず、また、処理装置の高いデータ転送能力も計算制御を行なうためには不要である。
本発明の観点は、中央処理装置(処理装置)の演算能力がRTPデータを通過させるルーチンを扱うことから決定されることがないように、特別なケースのセッション処理からも離れた、一般的に、定常状態のRTPセッションの取り扱いとは無関係な、RTPデータと信号データに対する別個のデータパスを供給することである。この区分化は、異なる入力及び出力プロトコル、装置、アドレス及び機能などの、より高い及び/又は低いアプリケーション層で、多数のサポートされたプロトコルの複雑性を取り扱うために、データストリーミング用のハードウエアスイッチング装置及び中央処理装置を用いて達成することが出来るパフォーマンス上のメリットがあるために、都合がよい。
図1は、サーバ(即ち、ストリーミングデータのソース)及びクライアント(目的地)間に配置された制御ポイントを有する簡単なネットワーク環境を示す。各相互接続はRTPストリーミングをサポートする多様なパケットタイプでラベルが貼られている。主題となる発明は制御ポイントを含む構成に広汎に適用することが出来、メッセージヘッダのフィールドを、既に述べたハードウエアアクセラレータを用いてリプレースする技術を用いることで、少なくとも部分的に制御ポイントでの処理の必要性を回避する。
図2は、制御ポイントがネットワーク上でパケットソース(サーバと表示)に接続された中央処理装置で表された、例示的な状況を示す。この構成においては、中央処理装置は、従来通り、パケットを一つ以上の目的地、即ちトラフィックマネージャ/アービタへ、パケットソースからのパケットのストリーム中で確認されたパケットを、本実施例においてディスクメモリ及びその制御装置として表示された、ネットワークに接続された格納素子のような、一つ以上のアドレス可能な目的地、又は読み出し装置などに向けて方向付ける形で通過させなければならない。
発明の観点に基づくと、パケットデータは、まずネットワークアクセラレータの形のインターフェース装置により取り扱われる。パケットの取り扱いを制御するために、入ってくるストリーム状態のRTPパケット内のヘッダ値を置換するように設定されたネットワークアクセラレータは、有ったとしても最小限の計算的な複雑性を有する、高いスループットの装置として実現される。特に、値は制御装置によりネットワークアクセラレータの連想メモリ内にセットされる。この値は、パケットを格納装置又は読み出し又は他のローカルな目的地に伝送する、ローカルアドレス値で、ヘッダ値を直接置き換えることが出来る。または、ハードウエアアクセラレータは、制御装置によりパケットを、効果的に信号経路を分割し、ある内容の二つ以上のコピーを二つの目的地へ導くなど、どこか他の方向に伝送するように管理されることも可能である。
この目的のために、ハードウエアアクセラレータの連想メモリは、ストリームの処理が開始された時点で個々のストリームに対応した、一連のアドレス、ヘッダ値、フラグなどをロードしたテーブルを形成する。追加のパケットがリアルタイムで到着すると、ハードウエアアクセラレータが連想メモリ内の対応する情報に、関連するストリームに関するテーブル項目を探し出すことでアクセスし、該パケットのヘッダ値を連想メモリ内にロードされた値から生成されたヘッダ値又は該連想メモリ内にロードされた値の中から見つけたヘッダ値と置き換える。連想メモリ内の値の一部は、例えばユーザコマンドを実行するなど、制御処理装置内で生じている値である。連想メモリ内の該値の一部は、制御処理装置から独立したハードウエア処理装置の運転により生成することも出来る。例えば、ハードウエア処理装置は、UDPパケットの損失を回復するために、又はスイッチング機能を円滑に行なうためなど、ある条件の下でシークエンスナンバーを加算したり、タイムスタンプ情報を調整したりする計数器又は加算器を持つことが出来る。
この例における特定のソース及び目的地の存在は代表的な例である。本発明は、多かれ少なかれ基部又は末端となることが出来、また図に示すようにデータ通信で接続された、多様な潜在的なソース及び潜在的な目的地を有する状況に適用することが出来、その潜在的なソース及び潜在的な目的地は、そうした二つの存在間で、一方向、又は逆方向又は両方向に通過するパケットのソース又は目的地として、与えられた時間、機能することが出来る。この特別な例では、コンテンツ信号が再生装置で示されそして同時に記録される状況でパケットの通過が行なわれる。他の実施例では、データの流れは、データが記録されるが再生されない、又は再生されるが記録されない形で、セットアップされる。他の特定のソース及び目的地素子を用いることが出来る。同じ流入パケットは、一つのソースから二つ以上の目的地へ伝送することが出来る。また、二つ以上のソースからの内容が、例えば、ピクチャー・イン・ピクチャー図として調整された格納装置又は再生装置を指定したり、例えばテレビ会議時に、同時サイド・バイ・サイドディスプレイを指定したりすることが可能である。これらの及び他の同様な適用が本発明に基づいて簡単に行なうことが出来る。
データの流れは三つの主なタイプに分類される。即ち、全体の表示制御のためのRTSPパケット、個々のセッションを制御するRTCPパケットそしてデータ内容伝送のためのRTPパケットである。
RTSPは一つ以上の並行的表示又はデータ転送を制御するために使用されるアプリケーション層プロトコルである。単一のRTSP接続はいくつかのRTPオブジェクトの転送を、同時に及び/又は連続的に制御することが出来る。ビデオ会議装置においては、例えば多数の場所がある場合、双方向伝送が各場所の組間で発生する。RTSPの文法は、HTTP/1.1のそれに似ているが、メディア伝送に特有の取り決めがある。セッションを規定する主要なRTSPコマンドは以下のようなものである。
・SETUP:サーバにストリームのリソースを割り当て、RTSPセッションを開始する。
・PLAY及びRECORD:ソースからのSETUPを介して割り当てられたストリーム上で目的地へのデータ伝送を開始する。
・PAUSE:サーバリソースを解放することなくストリームを一時的に停止する。
・TEARDOWN:ストリームに関連したリソースを解放する。RTSPセッションはサーバ上で終了する。
・SETUP:サーバにストリームのリソースを割り当て、RTSPセッションを開始する。
・PLAY及びRECORD:ソースからのSETUPを介して割り当てられたストリーム上で目的地へのデータ伝送を開始する。
・PAUSE:サーバリソースを解放することなくストリームを一時的に停止する。
・TEARDOWN:ストリームに関連したリソースを解放する。RTSPセッションはサーバ上で終了する。
制御ポイントがRTSP SETUP要求を使用してオブジェクトの伝送を要求した場合、それはサーバ及びクライアントに、オブジェクト識別、ソース及び目的地のIPアドレス、プロトコルポート及び使用すべき伝送レベルプロトコル(一般的に、RTP及びTCP又はUDP)などのオブジェクト伝送の詳細を含む要求を送る。こうしてRTSP要求はクライアントとサーバへのセッションを記述する。ある場合には、該要求は、特にオブジェクトのオーディオ又はビデオ成分のような、利用可能なオブジェクトの一部のためのものであり得る。
全ての必要なSETUP要求が為され、認識されると、制御ポイントは、伝送の方向に応じてPLAY又はRECORD要求を出す。該要求は、配達されるべきオブジェクトの一定の範囲、オブジェクトの通常の再生時間及び再生を始める現地時間を指定することが出来る。
再生が完了すると、あたかもPAUSEコマンドが出力されたかのように、表示は一時的に休止される。PAUSEコマンドが出力されると、ストリームが停止されるべきタイムスタンプが記録され、サーバ(クライアント)は、引き続いてPLAY(RECORD)要求が出力されるまでデータの配達を止める。
TEARDOWN要求が出力されると、特定のストリームに関するデータの配達が停止され、全ての関連するセッションリソースは解放される。
RTSPコマンドは、RTP/UDP又はRTP/TCPが伝送に使用すべき帯域外伝送(転送)セッションを規定することが出来る。“帯域外”伝送とは、二つ以上の異なる伝送又は接続経路を意味する。この場合のRTSPトラフィックは一つ以上の接続であり、また、RTPデータの実際の転送を実行するために、異なる接続がRTSPにより規定される。
RTPパケットはTCP上を搬送することが出来る。これは、UDP伝送は、維持された接続を要求せず、喪失パケットに鈍感であり及び/又は、TCPのように喪失パケットの検出及び復旧を試みないことから、一般的に言って非効率的である。UDP伝送プロトコルは、オーディオ又はビデオデータサンプル値などのパケットのリアルタイム伝送に適している。そうした値は、それぞれはそれほど重要ではないが、大容量での伝送が必要となる。TCPはUDPとは、接続が確立している点で異なり、例えば、再伝送を試みてパケット損失を回復することを試みるなど、該プロトコルは信頼性を重要視している。これらの点は、RTPを必要とするUDPよりもより矛盾しないものである。この開示は、一般的にUDPがRTP伝送に使用されると想定している。しかし、本開示は好ましいUDP伝送に限らず、そのかわりTCPの他のプロトコルもまた含む。
サーバがRTPを用いて配達すべきオブジェクトの要求を受けると、オブジェクトは一般的にその本体のフォーマットからパケット化が可能なフォーマットに変換される。多数の“コメント要求(RFC)”のメッセージスレッドが、前述のパケット化可能なデータに関連した問題を解決するために産業界において展開され、例えば,多様なメディアタイプに関する関連RFCを含む、多数の“コメント要求(RFC)”のメッセージスレッドが、インターネットエンジニアリングタスクフォース(Internet Engineering Task Force)(ietf.org)によってオンラインアクセス可能に維持されている。
各メディアオブジェクトタイプは、通常、関連するRFCで示された標準仕様に基づいて、各オブジェクトタイプでヘッダーフォーマットを変える形で、幾分か異なった形でパケット化される。該相違は、異なる用途を持ったデータを取り扱う際に遭遇する問題と異なるオブジェクトに起因するものである。
図3は、共通のRTPヘッダーのフォーマットを示すもので、例えば、RFC3550/3551で定められたものである。ヘッダー部分の略語は、以下のようなものである。
“V”はバーションナンバーを示すもので、現在のバージョンは2である。RTPフォーマットであるパケットを独自に示す固有のものはヘッダー内には無いが、このヘッダー位置のバージョンナンバー“2”の表示は一つのインジケータである。
“P”は、ペイロードの最後に無視すべき何らかの付け足し(パディング)が有るか否かを示す値で、有る場合には、付け足しの長さ。付け足し値の最後のバイトは付け足しバイトの全長を示す。
“X”は、拡張ヘッダーが存在するか否かを示す値。
“CC”は、このヘッダー内で確認されたコントリビューティングソース(貢献ソース)の総数。
“M”は、マーカビットである。このビットの実行は、ペイロードタイプに独特のものである。
“PT”はペイロードタイプを示す。即ち、伝達されるべきオブジェクトのタイプを示す。とりわけ、ペイロードタイプ識別子は、受信器にどのようにしてRTPストリームを終わらせるかを決定させることが出来る。
“シーケンスナンバ”は、伝送されるRTPパケットの数のカウント。これは、伝送されたバイトの数を示すためにシーケンスナンバを使用する、TCPとは異なるものである。RTPシーケンスナンバは、伝送されたRTPパケットの数、即ち、パケットインデックスである。
“タイムスタンプ”は、ペイロードタイプに依存するフィールド値である。通常、タイムスタンプは、送られたパケットの時間的な見出しであり、ある時には、受信機に、パケットの内容を記録又は再生する際のタイミング状態を適合させる参考となる。
“SSRC ID”は、伝送されるべきデータのソースを示す。
“CRSC ID”は、ミキサーやトランスレータなどの、伝送されるべきデータを処理した、何らかのコントリビューティング(貢献)ソース又はソースを示す。複数の貢献ソースが存在し得るし、また、SSRC IDで示されたオリジナルソース以外には無い場合もある。上記したように、ヘッダーのCCの値は貢献ソースの総数を示している。該数は、貢献ソースの識別子の確認された数、それ自体を処理し、該ヘッダに続く内容に先駆けたインデックスとすることができる。
もし、Xビットがセットされていると、RTPヘッダーの後に拡張ヘッダーが有る。拡張ヘッダーの仕様及び性質は、ペイロードタイプに従属する。ペイロード独特のサブヘッダーは通常、パケット損失が改善されるような方法で、規定され、ある程度の周期的な発生には耐えることが出来る。MPEG2などの、あるフォーマットにおいては、ビデオ及びオーディオエンコード情報を有する多数の複雑なサブヘッダーが、メインのRTPヘッダーの後に続く。
ペイロードが図3に示したパケット最後のサブヘッダーの後に続く。本体のメディアオブジェクトに対するペイロードの関係も、対応するペイロードタイプを記述する基準により決定されている。本来のオブジェクトと一連のRTPパケットのペイロードとの間にはしばしば、1対1の対応が無い。これに影響する多様な要素があるが、例えば、RTPパケットペイロードシーケンスと本来のオブジェクトに含まれるバイトのシーケンスの間の相違に関する状況のいくつかの例がある。
・与えられたフレームについて、オーディオ及びビデオ情報を同期させる必要
・RTPペイロード内のデータブロックのインターリービング
・重要なデータ素子に関するリピートパケット
・オーディオ/ビデオの多重分離
・又は1.1.3RTCP
・与えられたフレームについて、オーディオ及びビデオ情報を同期させる必要
・RTPペイロード内のデータブロックのインターリービング
・重要なデータ素子に関するリピートパケット
・オーディオ/ビデオの多重分離
・又は1.1.3RTCP
与えられたRTPセッションがアクティブな間、周期的に、該セッションに関する制御情報が、RTCPを用いた別の接続で交換される(UDPの場合、RTPセッションは偶数番号の目的地ポートを使用するが、RTCP情報は、次のより高い奇数番号の目的地ポート上で伝送される)。RTCPはデータ分配の品質に関するフィードバックを供給することを含む多様な機能を有し、それはネットワークの問題がローカルなものか、グローバルなものかを決定するうで、サーバにとって有益であり、特にIPマルチキャスト伝送の場合に有効である。RTCPは、RTPソースに関する、永続的な伝送レベル識別子(a persistent transport-level identifier)である、CNAMEを運ぶ機能も有する。コンフリクト又はプログラムの再スタートはSSRC IDSの移動が生じるので、受信器は各参加者の軌跡を保持するためにCNAMEを要求する。CNAMEは、多様なRTPセッションから多数の関連するストリームを同期させるために使用することも出来る(例えば、オーディオとビデオを同期させる)。
伝送の全ての参加者はRTCPパケットを送るように要求される。セッションにおける参加者の数が増加すると、それぞれにより送られるパケットの数は、都合良く減少させられる。各参加者にそのTRCPパケットを他の全ての参加者へ送るようにすることで、各参加者は参加者の数を常に把握することが出来る。この数は、今度は制御パケットが送られる速度を演算するために使用される。RTCPはユーザインタフェースで表示される参加者情報のような最小限のセッション制御情報を伝送するために使用することが出来る。
これらのタスクを達成するために、RTCPパケットは以下のカテゴリー又はフォーマットのうちのひとつに分類される。
・SR:送信者レポート、アクティブな送信者である参加者からの伝送及び受信の統計用
・RR:受信者レポート:アクティブでない送信者である参加者からの受信の統計及び、SRと組み合わせて、31ソース以上について報告しているアクティブな送信者用
・SDES:CNAMEを含む、送信元記述事項
・BYE:参加の終了を示す
・PP:アプリケーションの特別な機能
・SR:送信者レポート、アクティブな送信者である参加者からの伝送及び受信の統計用
・RR:受信者レポート:アクティブでない送信者である参加者からの受信の統計及び、SRと組み合わせて、31ソース以上について報告しているアクティブな送信者用
・SDES:CNAMEを含む、送信元記述事項
・BYE:参加の終了を示す
・PP:アプリケーションの特別な機能
RTPのように、RTCPパケットのぞれぞれのフォームは共通ヘッダで始まり、可変長のサブヘッダーが続く。多数のRTCPパケットは連結されて結合されたRTCPパケットとすることが出来、それはより下層のプロトコルの単一パケットで一緒に送ることが出来る。
本発明の観点は、ハードウエアのみの又はソフトウエアのみによる解決法を提供する代りに、ハイブリッドなハードウエア及びソフトウエアによる解決法を提供することで、総合的なRTSP/RTPの解決法の改良である。全てをハードウエアで解決する手法は、全ての制御状況のシナリオを提供するために、極めて複雑化する。反対に、そうした複雑さを扱うことの出来る処理装置及びコーディングを備えたソフトウエアのみの解決法も、十分に開発されてはいない。与えられたストリームが処理中となった後の殆どの処理に関しては、与えられたストリームに続くパケットを、それまでのパケットと同じ方法で取り扱いを継続する処理の多くは、反復が多く、コンピュータ的なパワーが要求されない演算を用いて取り扱われる。
本発明の有利な実施例に基づくと、大規模にセットアップされ、潜在的には複雑であるが有能なソフトウエアプログラムを実行する制御装置により設計された制御手順がハイブリッドな解決方法として提供される。しかし、メディアオブジェクトを使用し、そしてソフトウエアにより生成されるファイルをサポートする伝送を加速するために、専門化されたハードウエアが使用される。
演算が比較的複雑であることと、演算頻度が少ないことから、主として制御ステップに関するRTSP及びRTCP機能は、中央処理装置内でそれに過大な負荷を掛けることなくソフトウエアにより実施される。一方、RTPは、メディアストリーム内でそれぞれの入ってくる及び出てゆくパケットを、リアルタイムデータ速度で順番に、又は殆ど順番に処理することが要求され、本発明によるハードウエアによる加速の利益が要求される。
ストリーミング機能の特定の一部、即ち、RTPコンテンツのオフロードを行なうハードウエアによりRTSP/RTPを利用する、運転の一例についてここで述べる。この機能はパーソナルビデオレコーダ(PVR)で広く使用され、エンドポイントからRTPの規格化されたデータを受入れ、即座に又、任意の時間の経過後に、該同じRTPの規格化されたデータを、同じ又は異なるエンドポイントに送ることとして説明することが出来る。これは、該エンドポイントが一時的なものであったり、変化したり、切り替わったりする(例えば、ユーザの選択により)ような機能の特性を有する。該エンドポイントの特別な性質は記述した本発明の運転にとって必須なものではない。エンドポイントは、ビデオカメラや再生受信器などの始まりとなる又は最終的な表示装置であったり、圧縮/解凍又はフォーマット変換装置であったり、又はこれらとストリーム内のパケットデータ信号が目指しているか、出発している他の素子との組み合わせであったりする。
図2に示すように、メディアストリームは3つの主要なアーキテクチャー上の存在を有しており、それは、即ち中央処理装置、トラフィックマネージャ/アービタ、及びネットワークプロトコル又はハードウエアアクセラレータである。これらの構成は、その物理的実施例により変わりまた、回路と制御工程の条件により、より簡単になったり、複雑になったりする。特定の回路素子は多かれ少なかれハードウエア的に配線される形で、回路は実施されるので、こうした素子のある機能は、本発明に基づくRTSP/RTPトラフィックに関連する形で、規定される。
中央処理装置はシステム処理を支配する。ネットワークプロトコルアクセラレータ又は“ハードウエアアクセラレータ“はリソースが集約されてはいるが、多分反復又は繰り返しの多い処理タスクを取り扱う。こうしてハードウエアアクセラレータは、高周波数で複雑性の低い演算を行なうことから中央処理装置を助ける。入ってくるRTPパケットのヘッダ(図3に示す)により部分的に提供され、またストリームをセットアップする際に制御装置39により設定される値により部分的に提供される情報に基づいて、図4に示すローカルヘッダがパケット22のRTPヘッダの前に付加される(図4に示す)。こうしてデータの流れは、連想メモリを用いて、プルグラム的な影響を受けたローカルなアドレスを置き換え付与されたヘッダーフィールドにより、各パケットは制御装置39を通過させる必要なく、図5のブロック図に示すように進行する。
ネットワークハードウエアアクセラレータは、連想メモリ(CAM)又は、少なくとも現在進行中のこれらのストリームに対して、該メモリ内で相互参照される値のテーブルを有している。連想メモリはハードウエアアクセラレータとの接続のための接続パラメータを格納しており、それは少なくとも装置全体として使用可能な接続のセットを含むものである。ハードウエアアクセラレータは、入ってくるパケットが連想メモリ内に格納されたメッセージ待ち行列(キュー)情報に既に設定されたストリームと関連しているか否かを決定することの出来る回路を有する。もし、メッセージ待ち行列(キュー)の項目が有った場合、ハードウエアアクセラレータは該メッセージ待ち行列(キュー)の項目により既に決定された方法で、入ってくるパケットを取り扱う。もし、メッセージ待ち行列(キュー)の項目が無かった場合、該パケットが加速されたストリームの一部となるのならば、ハードウエアアクセラレータは中央処理装置に対して新しいメッセージ待ち行列(キュー)の項目を設定するように任せる。該パケットの取り扱い方法には、パケットのヘッダ値をローカルアドレスに置き換えること、特別の状況に対処するためにヘッダ値を改訂すること、異なるレベルのプロトコルに関連した値に変更することなどを含んでいる。
トラフィックマネージャ/アービタは、入ってくる及び出てゆくネットワークトラフィックの管理の他、メモリ及びディスクアクセスアービトレーションを提供する。それは多様なハードウエア的にアクセラレートされた接続及び中央処理装置の入力及び出力に割り当てることの出来る待ち行列(キュー)の数を管理する。
本発明の方法は、図4のデータの流れを示すブロック図及び図6のフローチャートに示される。メディアストリーマ装置は、エンドポイントからRTPパケットのストリームを受け取ると、リアルタイムパケットの速度を維持するために、十分な効率と速度で、そしてデータ取り扱いに関する要求における変更と互換性のある十分に適用可能な柔軟性でもって、データを処理するように実行されなければならない。例えば、RTPペイロードタイプ、ソース及び目的地を動的に変える幅広いアレイを含む、エンドポイント又は中間素子と新しいソース/目的地との関係を呼び出したり、遮断したりするような変更である。
RTSP及びRTCPの演算はめったに起こらないので、中央処理装置でソフトウエアが走っている最中でも適切に実行することが出来る、たとえ、該プログラムが複雑であっても、データ内容に関するペースを維持することに関する問題は生じない。従って、これらの機能は、中央処理装置でソフトウエアが走っている最中に実行されることが望ましい。
一方、RTPの安定状態のストリーミングは、パケットの繰り返しの多い取り扱いである。例えば、ストリーム中の全てのパケットを、ストリームがアクティブである間、一時的に割り当てることの出来る特定の目的地に方向付けることなどである。この機能は、ネットワークアクセラレータ及びトラフィックマネージャ/アービタの専用のハードウエア内で取り扱われる。
しかし、複数のストリームが同時にアクティブになることがある。与えられたストリームに関してパケットを矛盾無く取り扱うためには、連想メモリは該ストリームに適用可能な、目的地アドレスやロストパケットシーケンスナンバ等の、1セットの値を持っている必要がある。ハードウエア処理装置は、連想メモリを経由して関連するパケットデータ値が参照された、ストリーム確認情報を保持するレジスタを持っている。比較処理(それはゲート演算や単純な演算を含む)により、ハードウエアアクセラレータは入ってくるパケット上の識別情報と連想メモリ内の項目を比較し、一致したパケットについての情報を出力に出す。この処理は、例えば、ヘッダアドレス情報などのパケットヘッダの値を、該パケットが関連しているストリームについての、連想メモリから読み出したローカルアドレス情報と置き換えるために使用される。
値の置き換えは、図6のフローチャートに概略を示すように、単純で繰り返しの多い処理である。もし、次のパケットが現在のストリーム中の一部で遭遇した場合、現在のストリームは待ち行列(キュー)項目を持っている。ストリーム確認情報(例えば、アドレス情報)は待ち行列(キュー)、即ち、連想メモリ内の項目と比較される。もし、項目が見つからなかった場合、処理装置は信号を出し、適当な待ち行列(キュー)の項目値を決定し、それらをハードウエアアクセラレータの連想メモリ内に格納するようにプログラムされた処理装置により、項目が設定される(処理装置の機能は、波線による箱内に示す)。引き続く更なる処理に中に、ハードウエアアクセラレータは受け取った次のパケットに関する項目を決定し、オリジナルのヘッダ値を連想メモリからの値に置き換え、ストリームの終わりまで続ける。その後すぐ、そのストリーム確認情報についての連想メモリ内の待ち行列(キュー)の項目から離れる。ストリーミング装置は、リソースを用いた新しい接続をサポートする準備が整い、解放される。
ソフトウエア処理は、例えばユーザ入力選択を扱う特定の処理を開始し、停止し、その処理間で切替えることが出来るアプリケーションプログラムインターフェース(API)を介した、ハードウエア素子によるインターフェースを含む中央処理装置により実行される。APIは、ハードウエアユニット(レジスタへの読み書き、ハードウエア待ち行列(キュー)へのアクセスなど)と中央処理装置間の直接的なインターフェースを隠す。
好適な例では、個人ビデオ記録(PVR)装置の機能性は以下のように実行される。なお、この記述は限定的な例ではないものと理解されるべきである。
中央処理装置のプログラム中で走っているRTSP機能は、パケットデータのソース又は目的地であるエンドポイントから受け取るべきSETUPコマンドをモニタしている。RTSP−SETUP要求からなるパケットがネットワークアクセラレータに受け取られると、そこで確認されたストリームは、CAMの参照テーブル内の項目を参照しない。ネットワークアクセラレータはそれらを適当なトラフィックマネージャの待ち行列(キュー)(中央処理装置に入ってくるトラフィックに関連する待ち行列(キュー))に割り当てる。一旦、RTSP処理が完全なSETUPメッセージを受け取ると、CAM参照パラメータ(ソース及び、目的地のIPアドレス及びポート、伝送プロトコル)がSETUPメッセージ(全体又は部分)から決定される。CAMテーブルの接続テーブル項目はRTPセッションに関して設定される。
RTSPは次いで、関連するエンドポイントからの引き続くRECORD要求を待つ。RTSP−RECORDメッセージを受けると(受けたとき)、SETUPメッセージのパスと同じ経路で、それはネットワークアクセラレータからトラフィックマネージャ、中央処理装置へ通過する。RECORDメッセージは、記録すべきストリームの(時間)幅を含んでいる。この時点でセッションは確立したものと考えることが出来、ネットワークアクセラレータはデータを受け取る準備が出来る。中央処理装置は時間幅を基にしたオブジェクトザイスを出力し(時間幅が規定されていない場合には、最大値が出力される)、利用可能な待ち行列(キュー)識別子QIDがスケジューリングの為にトラフィックマネージャに出力される。これにより、ハードウエアアクセラレータは、ストリームが変化することなく続く限り、ヘッダ値を単に置き換えることでパケットを処理することができる。
例えば、もし、ローカルな記憶装置が、入ってくるストリームの記録を開始したりすると、CAMテーブル項目が終わらせられたり、修正されることで変化が生じ、再生装置へストリームを指向させている項目が変更され、パケットもまたディスク制御装置へ送られる。逆に、ストリームとエンドポイントをローカルな記憶装置で関連付ける他の項目が加わることも有る。
RTP終了ルーチン、状況により変化する切替え処理及び類似した計算が強化された機能は、相対的に単純なハードウエア内で実行するには余りにも複雑である。リアルタイムでのストリーミングデータパケットの時間的なプレッシャーは、また、余りにも厳しく、広汎なプログラムを扱う中央処理装置は入ってくるトラフィックを常に(即ち、プログラムの実行中に)タイムリーに効率的に扱うことは出来ない。本発明は、ストリーム中の各パケットがネットワークアクセラレータにより受け取られるところで、代わりの方法を実行する。それは、接続テーブル内でパケットを照合し、レイヤ3及び4ヘッダを取り除き、ローカルヘッダを適用し、ローカルヘッダ、RTPヘッダ及びRTPペイロード付きの各パケットを書き込み用のトラフィックマネージャに、ローカルディスク等の目的地に送るものである。
入ってくるパケットのフォーマットは、パケットの全長に関する値及び他の必要なフラグを含む32ビット長からなる、ローカルヘッダ(Local Header)である。これらのフィールドは各RTPパケットの境界を規定し、該パケットがディスクに格納された後に有用なものとして残る。オブジェクトがこのフォーマットで格納される一方で、格納されたパケットは受領通知のため起源となるエンドポイントへ逆配達するためにスケジューリングされるか、ネットワーク上の他のエンドポイントにルート付けられる。トラフィックマネージャは、各パケットについてローカルヘッダ(Local
Header)からレングス(Length)フィールドを抽出し、伝送サイズとして使用するなど、オブジェクトのパケットを一つずつ読むことが出来なければならない。トラフィックマネージャはデータのレングス(Length)バイトをネットワークアクセラレータに送り、待ち行列(キュー)を次のパケットの始まりに進める。
Header)からレングス(Length)フィールドを抽出し、伝送サイズとして使用するなど、オブジェクトのパケットを一つずつ読むことが出来なければならない。トラフィックマネージャはデータのレングス(Length)バイトをネットワークアクセラレータに送り、待ち行列(キュー)を次のパケットの始まりに進める。
パケットがトラフィックマネージャから受け取られると、ネットワークアクセラレータはローカルヘッダを取り除き、相殺するものを加える。この相殺するものは、最初は中央処理装置で決定され、関連する伝送用に連想メモリ(CAM)内のフィールドとして格納され、ハードウエアアクセラレータにより外に出てゆくパケットのRTPヘッダ内に配置される、シーケンスナンバ(Sequence Number)フィールドを決定するのに使用される。これは、RFC3550に規定されたように、ランダムISSの規定を可能とする。
外に出てゆくタイムスタンプは同様な方法で調整される。これは、RFC3550で規定されたように、ランダムITSの規定を可能とする。
レイヤ3及びレイヤ4ヘッダは外に出てゆくパケットのヘッダ内に似たような構成で配置されている。外に出てゆくパケットはMAC/PHYブロックに送られる。
この方法の一つの利点は、入ってくるRTPトラフィックがソフトウエアで管理することが出来ることである。多様な異なるRTPペイロードタイプが使用されるようになり、また、恐らく定義が異なっているので、それらのサポートは、創意に富むストリーミング装置により維持が可能となる。更に、記録中に遅れて見る(delayed-view-while-recording)のPVR機能性がサポートされる。
欠点としては、オブジェクトがRTPヘッダーフォーマットで格納されている間、HTTP伝送でのアクセスが出来ないことである。RTPでないクライアントに対して直ぐに、又は必要なリソースが利用可能となるまで延期された形の再構築によって全てのクライアントに対して利用可能にするために、ホスト中央処理装置上のソフトウエアがオリジナルメディアオブジェクトを再構築するために使用される。
図7に、好適な実施例を示す。本発明は、ディスクアレイ制御装置を有するデータ処理システム内に導入されている。この制御装置は格納管理を行なうことが出来、消費者の電子デジタルメディア利用又は通信及びテレビ会議などの似たような特徴を持った利用に対して貢献することができる。娯楽の利用においては、本制御装置はホームネットワークと、デジタルメディア(オーディオ、ビデオ、イメージ)を格納するハードディスク装置(HDDs)によって一般的に例示される、データ貯蔵装置のアレイ間のインターフェースを提供する。
装置は好ましくは、ホームネットワーク又は他のローカルエリアネットワーク(LAN)に対するインターフェースとして、統合型10/100/1000イーサネットMACポートを有している。USB周辺装置アタッチメントポートは、メディア入力装置(フラッシュカードなど)に又は外部ワイヤレスLANアダプタを追加することでホームネットワークに接続することが出来る。
好ましいデータ取り扱いシステムは、より上層のプロトコルアクセラレーションエンジン(IP/TCP、IP/UDP用)及びセッションアゥエアトラフィクマネージャを介して、メディアアーカイブにハイパフォーマンスなシェアアクセスを行なう多数の層及び機能を有する。セッションアゥエアトラフィックマネージャは、中央処理装置として、ここで述べたRTPストリーミングを管理することに加えて、実際のメディアセッションに基づいて、ネットワーク帯域、メモリ帯域及びディスクアレイ帯域などの共有資源を割り当てることが出来る。例えば、ビデオセッションは、イメージブラウジングセッションよりもより多くの資源が割り当てられる。更に、帯域は、時間に敏感なメディアセッションに関してはその帯域が保証される形で割り当てられ、また、メディアセッションの大量アップロードやマルチPCバックアップアプリケーションなどの、時間に敏感でないアプリケーションには、ベストエフォートとしての帯域が割り当てられる。
データ取り扱いシステムは、関連するハードディスクの重複アレイ(RAID)に対する高いパフォーマンスストリーミングを含む。ストリーミング−RAIDブロックは、エラー防御に関する冗長性を持ち、単一HDDの欠点に対してアーカイブに格納されたメディアを保護する。HDDは、シリアルATAディスクとすることが出来る。例えば、8個のSATAディスクを有し、64までの同時双方向ストリーミングをトラフィックマネージャ/アービタブロックを介して取り扱うことの出来るシステムなどである。
データ取り扱いシステムは本発明の多様で潜在的な態様の例であり、図7に示す全体のデータ取り扱いシステムは概要だけを述べたものである。装置内には、受信パスと伝送パスの、二つの別のデータパスが有ある。“受信パス”は、他の外部装置からシステムへ方向付けられたトラフィックフローと考えられ、“伝送”パスは、ソースから有る地点へのパス、及び与えられたストリームの文脈内での、それぞれの目的地へ向けたパスであり、データフローの反対の方向である。
上層処理装置(ULP)はギガビットイーサネット制御装置(GEC)又は周辺トラフィック制御装置(PTC)への又はからのデータ通信と接続されており、PTCはパケット化されていないデータ伝送のためにトラフィックマネージャ/アービタに対し直接のインターフェースとなっている。パケット伝送は、ここで述べるように取り扱われる。
受信データパスでは、通常、GEC又はPTCブロックが物理インターフェース、例えばより大きなネットへ/からのイーサネットパケットを受け取る。GECは、パケットの完全性やマルチキャストフィルタリング等、多様なイーサネットプロトコルに関連するチェックを行なう。パケットは、更なる処理のためにULPのブロックへ通過させられる。
ULPはアドレスから抽出された第2,3及び4層のヘッダーフィールドを解析する。接続探索は該アドレスに基づいて行なわれる。探索結果を用いて、ULPは受け取ったパケットを送るか否かを決定する。既に確立された接続からの到着パケットは、TMAによって使用されるトラフィック待ち行列(キュー)目的の予め定義された待ち行列(キュー)ID(QID)が付される。未知の接続からのパケットはアプリケーション処理装置(AAP)による更なる調査が要求される。パケットは特別なQIDが付され、AAPに運ばれる。AAP通過後の到着パケットの最終目的地は、パケットがメディアコンテンツを持っているときには、格納用ハードディスクとなり、パケットが制御メッセージを持っていた時、またAAPにより認識出来ないパケットの時は、更なる調査のためにAAPとなる。そこで、新しい待ち行列(キュー)IDを設定することとなる。上記したどのような場合でも、パケットはTMAブロックに送られる。
TMAは到着したトラフィックを共用メモリに格納する。メディアセッションの伝送の場合には、入ってくるオブジェクトデータはメモリに格納され、ディスク格納のためにRAIDデコーダ及びエンコーダ(RDE)ブロックに伝送される。TMAは適当な制御情報をRDEに送って格納処理を管理する。AAP調査のために充てられた制御トラフィックも共用メモリに格納され、AAPはメモリ内のパケットを読むためにアクセスされる。AAPは、このメカニズムを順序が狂った形で受け取ったパケットを再配列する為にも使用する。共用メモリ及びディスクの一部に、AAP用のプログラム指示及びデータが含まれている。TMAは、ディスクからメモリ及びメモリからディスクへの制御情報を伝送することでメモリとディスクへのアクセスを管理する。TMAはまた、AAPに、現在のパケットストリームからデータを引き出させたり、またパケットストリームへデータを挿入させたりすることも出来る。
伝送データパスでは、TMAがディスクからのオブジェクト検索要求を管理するが、当該要求は、必要に応じて処理のためアプリケーション処理装置を経由して、又はそのままネットワークインターフェースに送られる。メディアプレイバック要求をアプリケーション処理装置から受け取ると、TMAはMDCとRDEブロックを介してディスクから伝送されたデータを受取り、メモリに格納する。そしてTMAは該データを、要求された帯域及びメディアタイプに基いてULPブロックに登録する。ULPでは、外に出される各パケットについて、イーサネット及びL3/L4ヘッダーで該データをカプセル化する。パケットはそこで、指定された行く先ポートについてのGEC又はPTCブロックに送られる。
受信データパス上の入ってくるパケットについては、ネットワークアクセラレータの接続探索機能部が、アドレス生成、CAMテーブル探索及び接続テーブル探索機能ブロックを含むことが出来る。CAMの探索アドレスは、入ってくるパケットのヘッダから抽出した情報の結果として一部が形成される。抽出されるべきヘッダーフィールドの詳細は使用されるトラフィックプロトコルに依存する。形成されるべきアドレスは唯一の接続を表すものでなければならない。例えば、IP V4及びTCP/UDPプロトコルで運ばれる最もポピュラーなインターネットトラフィックでは、ソースIPアドレス、目的地のIPアドレス、TCP/UDPソースポート番号、TCP/UDP目的地ポート番号及びプロトコルタイプ(パケットのヘッダからの所謂“5組”)が唯一の接続を規定する。仮にパケットが異なるトラフィックプロトコル(IP V6のような)の場合、他のフィールドが接続を決定するために使用されてもよい。多数のプロトコルが使用されるところでは、フラグ、識別コードなどの適当な制御を参照することが出来、それによりシステムを“プロトコルを知っている”階層とする。例えば、処理は3つのステージに分割することが出来、各ステージはサポートされたプロトコルのレベルに対応している。第1のステージは、ヘッダの構文解析処理中に抽出されたフィールドから、L3プロトコルのバーション番号をチェックし、アドレス生成処理内のステップとして到着パケットに関する情報バッファ項目に格納することが出来る。アドレス生成処理の第2及び第3のステージは、複合ハードウエアテーブルが用いられる。各段階のテーブル項目数は、該テーブルが入るステージ及び各ステージでサポートされる異なるプロトコルの数に依存する。各テーブルの項目は、常に連想メモリ項目及び位置ナンバーレジスタを構成する。各位置レジスタは常に一組のオフセットサイズのフィールドを構成する。各CAM項目は、対応する位置レジスタについての特定のプロトコル値を格納している。オフセットは、パケットのヘッダの最初から抽出されるべきフィールドまでの、スキップすべきバイト数を規定している。同じアドレスが、CAMフィールド及び位置レジスタへのアクセスに使用される。
特定のプロトコルレベルのヘッダ長は固定でないこともある。例えば、TCP及びIPのヘッダ長は“オプションフィールド”により変化する。外側のレベルのプロトコルからの潜在的な可変ヘッダ長は、内側のレベルのプロトコルの位置を、内側のレベルのヘッダ長それ自体を含めて、相対的に動かしてしまう。変わるヘッダ長に適応するために、プロトコルヘッダ長フィールドは、長さフィールドを含むこれらのレベルについてのアドレス検索処理の一部として抽出が可能である。また、いくつかのプロトコル(IP V6及びUDPなど)はヘッダ内に長さフィールドを持たない場合もある。その場合、ヘッダ長は抽出されず、与えられた接続中に固定ヘッダ長をセットし、保持するような他の技術を使用することが出来る。
アドレス生成処理を図8に図式的に示す。アドレス生成処理の間、パケットはバッファされ、プロトコルの第1レベル(例えば、IPプロトコルのバーション番号)が確認され、パケットインフォメーションテーブルに格納される。パケットインフォメーションメモリには与えられた時間に多数の項目が有り、パケットインフォメーションメモリの先頭の項目は最初にアクセスされる。ヘッダ長(例えば、IPヘッダ長)は、該ヘッダ長が存在していれば、パケットインフォメーションテーブルから抽出される。第1ステージから抽出されたプロトコルタイプコードは、第2ステージプロトコル値を見つける場所に影響する。
CAMはプロトコルとオフセットの全ての可能な組み合わせをサポートする。決定された第1のオフセットサイズ値は、プロトコルの第2のレベル(例えば、この例のIPプロトコルに関するプロトコルフィールド)の抽出に繋がる。CAMの数で1対1に対応する位置番号レジスタ項目は、各ステージで入力される。第2ステージには、各項目において、二組の位置レジスタがある。もしあるならば、ヘッダ長フィールド(例えば、IPヘッダ長)が、位置レジスタの第2の組に規定されたオフセットに基づいて、パケットヘッダから抽出される。
第3ステージのフィールド抽出処理は、第2ステージのそれと似ている。しかし、第3ステージのCAMアクセスは、第1及び第2ステージなどから抽出されたプロトコルタイプの連鎖を反映しなければならない。8つのフィールドから値を抽出するためにいまや8組のオフセットサイズフィールドがある。プロトコルタイプの値を考慮して各項目から抽出された多数のフィールドは項目を確認する為に使用され、値は互いに連鎖して最終的なアドレスを形成する。
バッファ又はアドレス生成レジスタ及び連想メモリ内でアクセスされるフィールドは、ネットワークアクセラレータにより取り扱われる。ULPの制御処理装置は、CAM内の要求された値のアドレスを決定するための探索アドレスを構築するために必要な値を読むだけである。もし、アドレス生成処理中にCAMの探索ミスが有ると、処理は強制終了することが出来、入ってくるパケットにはエラーフラグが付される。
もし、各ステージで抽出されたプロトコルフィールドが異なるプロトコル用の異なった長さを有する場合、固定のオフセットサイズを得るために項目を付加することも出来る。固定長のCAM探索を可能とするために、使用していないビットパッドメモリを固定ザイスとなるまでアドレスすることが出来る。
アドレス生成レジスタの大きさを要約することが出来る。第2ステージは二つのレジスタ入力、二つのCAM入力、及び各メッセージ待ち行列(キュー)項目についての一組の位置レジスタを有する。第3ステージは八つのレジスタ入力、八つのCAM入力、及び八組の位置レジスタを有する。各位置レジスタは16ビットで構成され、10ビットはオフセットを表し(512バイトをカバー)、6ビットはサイズ用である(64ニブルを表す)。
アドレス生成セクションで生成された値は、接続が確立された時、即ち、特定のソースと目的地点間の特定のデータ伝送の接続の開始を伝えるパケットが到着した時、以前に格納された情報と共に、制御処理装置(即ち、アプリケーション処理装置)により使用される。制御処理装置は連想メモリ(CAM)に入力を与える。CAM内で各入力は唯一の接続を決定する。
システムがイニシャライズされた時(即ち、伝送接続が確立される前)、CAMには項目が無い。従って、最初のパケットが到着した時点では、アドレス項目は、CAM内に一致するアドレス情報を見いだすことは出来ない。そして、パケットは一応、CAM探索ミスと見なされる。この場合、特別待ち行列(キュー)ID(QID)が制御処理装置(即ち。アプリケーション処理装置AAP)に備えられたメモリ位置で該パケットに割り当てられる。
AAPは、到着パケットを分析した上で、接続をセットアップする必要があるかどうかを決定する。CAMには自由な項目を設置することが出来る(即ち、同時にサポートすることの出来る、64の可能なストリームの内の一つ)。自由に設定されたアドレスは、新しいストリームについての接続テーブルをセットアップするために使用される。AAPは接続アドレスをCAMの自由項目に書き込み、そして同じアドレスを持って後に到着したパケットはCAM内の該項目と一致する。これにより、後に到着したパケットは、前述したネットワークアクセラレータ機能により処理されるので、後に到着したパケットについては、AAPの注意を必要とすることなく処理することが出来る。
到着したパケットがCAM内の項目を有する既存接続と一致することが分かると(CAMヒット)、一致したCAM項目のアドレスが接続テーブル情報、QID及び他の情報を探索するために使用される。本実施例では、64の接続をサポートするために、64のCAM項目がある。各CAM項目には256ビットまで割り当てられている。勿論、他の構成でも可能である。
占有されたCAM項目と自由なCAM項目は共に、制御処理装置AAPによりアクセスすることが可能である。制御処理装置AAPは、CAM項目のセットアップ、テアダウン及びリサイクルを実行することが出来る。
CAM装置それ自体は、一般的にレジスタ及びゲート装置を有する形で多様な方法で設置すること出来る。レジスタ及びゲート装置は、アドレッシング入力として使用すべき入力データ値の少なくとも一部で、メモリから対応した出力データ値を抽出することを可能とする。ランダムアクセスメモリ装置は、一般的に特定のメモリアドレス、メモリ位置に対応する入力値をそれぞれアドレッシングすることで、データを格納及び検索することが出来る。多数のアドレッシングビットが多数のメモリ位置に対応する。メモリ項目の数が大きくはないところで、メモリ内で与えられた項目を見いだすために必要な時間は、メモリ内に格納されたデータの内容の一部とのデジタル的な比較(それ自体はむしろメモリアドレスを特定する)を可能とするハードウエアゲート装置により低減することが出来る。こうしてアクセスされるメモリを、連想メモリ(CAM)と称し、前述したタイプの用途に利点がある。
議論された例では、CAMは格納された値を4から144ビットの幅で変えることが出来、6から1024の入力の幅を持っている。図9に示す、1実施例では、二つの連結されたCAM装置が設けられ、各装置は129ビットで64の入力の装置であり、64個までの双方向ストリームをサポートする。129ビットの内、128ビットはデータ格納に使用され、1ビットは、入力−有効(entry-valid)ビットである。この64by256CAMを構成する装置は、図9に、単純化されたCAM探索ロジックダイアグラムとして表示されている。ここでは、256ビットのワードは、二つの128ビットのサブワードに分けられ、各サブワードは分離されたCAM装置の内容と比較される。この装置においては、一方の又は他方の128ビットのサブワードをそれぞれのCAM装置内の多数の項目と比較することが出来る。しかし、完全な256ビットの項目だけが唯一の格納された値と対応する。この処理は、二つのCAM装置のアドレッシングの対応付け及び直列的な比較により容易化される。
いくつかの接続において、ローカルヘッダが生成され、入ってくるそれぞれのパケットの前に付加される。こうしたローカルヘッダの生成はAAPにより構成が可能である。AULPローカルヘッダは、ネットワークからパケットが到着したときに生成される。ローカルヘッダは図10に規定されるフォーマットで32ビットの固定長である。ULPが各到着パケットのバイト数をカウントすることで引き出されたパケット長を前に付加する。更に、ULPはギガビットイーサネット制御装置により生成され、そしてローカルヘッダ内の検索によりULP自身により生成されたフラグを埋め込む。ULPは、ローカルヘッダがパケットの目的地に拘わらず有効である限り、同じフォーマットでローカルヘッダを加える。
本発明は、装置として例示されているが、方法発明としてとらえることも可能である。図面を参照することで、本発明のストリーミング装置(図1,2,7参照)は、制御値、ソースアドレス、目的地アドレス及びペイロードタイプの内、少なくとも一つを表しているフィールド24を有するデータパケット22を、ソース27と目的地29の間で管理する。通信経路32はサーバ27などからデータパケットを受取り、少なくともデータパケット22の中身部分33は、該データパケット22の前記フィールドから決定される規則に基づいて、少なくとも一つのクライアント35に向けて通過させられる。
規則は、データパケットが一つ以上のクライアントに向けて異なる方法で通過することで、変化するものである。例えば、異なる特定の装置にアドレスされたり、異なるプロトコル処理明細を介して処理されたりすることなどである。制御処理装置39は、通信経路に接続されている。制御処理装置の機能は、一つ以上の上層処理装置(ULP)及びアプリケーション処理装置(AAP)又は追加的な制御装置により部分的、又は全体的に提供され得る。いずれにせよ、制御処理装置は、接続又はストリームを確立する際にパケットを処理する少なくとも二つの代替え手段に適用可能な手順を、少なくとも部分的に決定する。
発明の観点から見ると、メモリ43を有するネットワークアクセラレータ42は制御処理装置39に接続しており、ネットワークアクセラレータのメモリ43に、データパケットが異なる方法で通過する際の少なくとも二つの選択手順を示すデータをロードする。手順は、明確なローカルアドレス又はリモートアドレスを指示する(これに限らないが)ことを含んでいる。ネットワークアクセラレータ42は、その後、制御装置39と実質的に独立した形で運転可能であり、データパケット22をクライアント35に通過させる。データパケット22は、フィールドを含んだヘッダ24(図3)を有しており、ネットワークアクセラレータ42は、そのフィールドを置き換えたり、付け加えたりの少なくとも一つを行なって、少なくとも二つの選択手順を選択するために、該フィールドに反応するように、運転が可能である。
本装置は、RTPリアルタイムプロトコルストリーミングを取り扱うのに適している。データサンプル又はRTP内の圧縮データプログラム等のプログラムコンテンツを含んだパケットに加え、データパケットは、RTSP及びRTCPストリーミング制御プロトコルの一つに基づく制御情報を更に有する。
好適な装置においては、ネットワークアクセラレータは、例えば、動作中に進行中の各ストリームの、ローカルアドレッシングに使用されるような、データ値を持った連想メモリを有している。制御装置は、与えられたストリームで使用されるべきデータ値をセットアップする。連想メモリを使用すると、制御装置のコンピュータによるリソース内に実質的に入り込まなくても、少なくとも連想メモリに接続されるか、含んでいるハードウエアアクセラレータを用いることで可能となる高いデータレートを利用して、同じデータ値の少なくともいくつかが同じストリームの引き続くパケットのために使用される。
少なくとも一つの変数を表す関連ヘッダ情報を有するコンテンツをパケット化するステップ(これにより、パケット化されたコンテンツが該変数により、該変数の機能として、一つ以上のソースと一つ以上の目的地との間で選択可能に取り扱われる)、ストリーミングコンテンツ内の制御情報を含み(パケット化されたコンテンツを選択的に取り扱う方法を、該制御情報により変えることが出来る)、該制御情報に基づいてソースと目的地との間で、パケット化されたコンテンツのストリームを設定し、又は方向を変え、休止し又は変更するステップ、そして、そうするときには、少なくとも部分的な前記制御情報から前記変数をある値に決定し、該値を該ストリームの識別子に関連してネットワークアクセラレータ内に格納するステップ、からなる方法を達成すべく、それぞれの部品は、運転される。その後、ストリームに関してパケット化されたコンテンツを受け取った時、該ストリームの前記識別子に関連してネットワークアクセラレータ内に格納された値を、該受け取ったパケット化されたコンテンツを取り扱うのに使用する。
従って、進行中のストリームのパケット化されたコンテンツはネットワークアクセラレータによって殆ど取り扱われ、制御処理装置の進行中の動作は最小となる。
発明は例示的な実施例に関連して開示されているが、独占権が要求されている発明の範囲を決定するには、実施例を議論するよりもむしろ添付されたクレームを参照すべきである。
Claims (16)
- コントロール値、ソースアドレス、目的地アドレス及びペイロードタイプの少なくとも一つを表すフィールドを有するデータパケットを方向付けるためのストリーミング装置であって、該装置は、
サーバからの前記データパケットを受け取る通信経路を有し、該経路に沿って前記データパケットの少なくとも内容部分が、少なくとも一つのクライアントに向けて、該データパケットの前記フィールドから部分的に決定された手順に基づいて、通過し、
前記手順は、前記データパケットを前記少なくとも一つのクライアントに向けて、少なくとも二つの異なる道筋で通過させることの出来る少なくとも二つの選択肢を有し、
前記通信経路に接続された制御処理装置を有し、該制御処理装置は、それぞれの前記選択肢に適用される前記手順の一つを決定するために、少なくとも部分的に運転することが出来、
メモリを有するネットワークアクセラレータを有し、前記制御処理装置は、前記ネットワークアクセラレータの前記メモリに、前記データパケットを異なる方法で通過させるための、前記少なくとも二つの選択肢を表すデータをロードするように運転することができ、その後前記ネットワークアクセラレータは、前記制御処理装置とは実質的に独立した形で運転され、前記そのための手順に基づいて、前記データパケットを前記少なくとも一つのクライアントに前記異なる道筋で通過させ得る、
ことを特徴とするストリーミング装置。 - 前記データパケットは、前記フィールドを含むヘッダを有しており、前記ネットワークアクセラレータは、前記少なくとも二つの選択肢を選択するために、前記フィールドに対して置換し、付加する、少なくとも一つを行なうように、前記フィールドに対して運転し得る、
ことを特徴とする、請求項1記載のストリーミング装置。 - 前記データパケットが前記少なくとも一つのクライアントに向けて、該パケットに関連するアドレッシング情報を変更することによることを含む形で、異なる道筋で通過させられる、
ことを特徴とする、請求項1記載のストリーミング装置。 - 前記データパケットには、該データパケットが規則に基づいて通過されるべきローカルアドレスが付加される、
ことを特徴とする、請求項3記載のストリーミング装置。 - 前記データパケットは、RTPストリーミングプロトコルに基づいて構成されたコンテンツパケットを含み、そしてアドレス情報を含んでおり、該コンテンツパケットは、前記ネットワークアクセラレータにより、追加的及び置換的ないずれかのアドレス情報が与えられる、
ことを特徴とする、請求項1記載のストリーミング装置。 - 前記データパケットは、RTSP及びRTCPストリーミングプロトコルのいずれかに基づいた制御情報を更に有する、
ことを特徴とする、請求項5記載のストリーミング装置。 - 前記RTSP及びRTCPストリーミングプロトコルのいずれかに基づく制御情報を有する前記データパケットのうちの少なくといくつかのパケットの情報は、前記制御処理装置のプログラムに基づいて、前記少なくとも一つのクライアントに前記コンテンツパケットを通過させる前記規則を規定するために使用される、
ことを特徴とする、請求項6記載のストリーミング装置。 - 前記ネットワークアクセラレータは、前記制御処理装置により、前記規則を規定する情報がロードされた連想メモリを有しており、前記ネットワークアクセラレータは、前記制御処理装置のプログラムに基づいて格納された前記メモリ装置のデータから読み出すことで、所定のパケットに適用可能な所定の規則をアクセスする、
ことを特徴とする、請求項7記載のストリーミング装置。 - 前記データパケットは、少なくもとオーディオデータ及びビデオデータのいずれかを表し、前記規則は、オーディオ又はビデオ格納装置、娯楽装置、オーディオ通信設備及び遠隔会議設備のいずれかにおける、異なる切替え処理に適用される、
ことを特徴とする、請求項8記載のストリーミング装置。 - 前記ネットワークアクセラレータは、前記規則に基づいて前記パケットを、目的地装置及びネットワーク格納装置に方向付けるように運転することが出来る、
ことを特徴とする、請求項9記載のストリーミング装置。 - 前記ネットワークアクセラレータは、前記規則に基づいて前記パケットを、読み出し装置、格納装置、パケット伝送用中間データ処理装置、ローカルターミナル装置及びリモートターミナル装置を含む、目的地装置に方向付けるように運転することが出来る、
ことを特徴とする、請求項10記載のストリーミング装置。 - 実質的にコンテンツをリアルタイムで参照する速度で該コンテンツをストリーミングする方法であって、該方法は、
前記コンテンツを、少なくとも一つの変数を表す関連するヘッダ情報と共にパケット化し、そのためにパケット化されたコンテンツが、該変数の機能として、該変数により一つ以上のソースと一つ以上の目的地との間で選択的に取り扱われ、
前記ストリーミングコンテンツに制御情報を含ませ、これにより前記パケット化されたコンテンツの選択的な取り扱い方法を該制御情報に基づいて変えることが出来、
制御処理装置に前記制御情報へアクセスさせ、また、ネットワークアクセラレータに前記パケット化されたコンテンツにアクセスさせ、
少なくとも一つの前記ソースと少なくとも一つの前記目的地の間で、前記パケット化されたコンテンツのストリームを確立し、方向を変え、休止し、さもなければ変更するなどのいずれかに際して、前記制御情報からある値を、前記変数の少なくとも一部に決定し、該値を、該ストリームの識別に関連して前記ネットワークアクセラレータ内に格納し、
前記ストリームからパケット化されたコンテンツを受け取った際に、前記ネットワークアクセラレータから、該ストリームの識別に関連して格納された前記値を決定し、前記ネットワークアクセラレータから決定された前記値に基づいて、前記一つ以上のソースと前記一つ以上の目的地の間で前記受け取ったパケット化されたコンテンツを取り扱い、これにより、現在進行中のストリームの前記パケット化されたコンテンツを、前記制御処理装置の最小限の動作で、選択的に取り扱うようにして、
構成したことを特徴とする方法。 - 前記ネットワークアクセラレータに格納された前記値を変更することを含み、前記変更は前記制御処理装置の運転により行なわれる、
ことを特徴とする、請求項12記載の方法。 - 前記制御処理装置は前記ネットワークアクセラレータに格納された前記値を、後に受け取った制御情報を処理した結果として、変更する、
ことを特徴とする、請求項13記載の方法。 - 前記ハードウエアアクセラレータ内に、項目を持った複数の識別されたストリームを供給し、前記ハードウエアアクセラレータは、対応する識別されたストリームに関連して前記ハードウエアアクセラレータ内に格納された複数の値の一つを、前記パケット化されたコンテンツの変化に対して選択的に適用する、
ことを特徴とする、請求項12記載の方法。 - 識別されたストリームに関する項目がアクセス可能なメッセージ待ち行列を持つ連想メモリを設け、
前記識別されたストリームの一つに対応する識別子と項目をマッチングさせることで、前記複数の値の一つを決定する、
ことを特徴とする、請求項15記載の方法。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US72446305P | 2005-10-07 | 2005-10-07 | |
US72472205P | 2005-10-07 | 2005-10-07 | |
US72457305P | 2005-10-07 | 2005-10-07 | |
US72446205P | 2005-10-07 | 2005-10-07 | |
US72446405P | 2005-10-07 | 2005-10-07 | |
US72506005P | 2005-10-07 | 2005-10-07 | |
PCT/US2006/039223 WO2007044562A1 (en) | 2005-10-07 | 2006-10-06 | Media data processing using distinct elements for streaming and control processes |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009512279A true JP2009512279A (ja) | 2009-03-19 |
Family
ID=37719120
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008534731A Pending JP2009512279A (ja) | 2005-10-07 | 2006-10-06 | ストリーミングと制御処理に異なる素子を用いたメディアデータ処理 |
JP2008534732A Withdrawn JP2009512280A (ja) | 2005-10-07 | 2006-10-06 | 補完指示ファイルを用いた、rtpエグレスストリーミング装置及び方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008534732A Withdrawn JP2009512280A (ja) | 2005-10-07 | 2006-10-06 | 補完指示ファイルを用いた、rtpエグレスストリーミング装置及び方法 |
Country Status (6)
Country | Link |
---|---|
US (2) | US20090147787A1 (ja) |
JP (2) | JP2009512279A (ja) |
KR (2) | KR100926007B1 (ja) |
DE (2) | DE112006002677T5 (ja) |
GB (2) | GB2448799A (ja) |
WO (2) | WO2007044563A1 (ja) |
Families Citing this family (56)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101026616B (zh) * | 2006-02-18 | 2013-01-09 | 华为技术有限公司 | 基于ip多媒体子系统的交互式媒体会话建立方法 |
US8539065B2 (en) * | 2006-07-26 | 2013-09-17 | Cisco Technology, Inc. | Method and apparatus for providing access to real time control protocol information for improved media quality control |
US8014322B2 (en) * | 2007-02-26 | 2011-09-06 | Cisco, Technology, Inc. | Diagnostic tool for troubleshooting multimedia streaming applications |
US20090135724A1 (en) * | 2007-11-27 | 2009-05-28 | Tellabs Operations, Inc. | Method and apparatus of RTP control protocol (RTCP) processing in real-time transport protocol (RTP) intermediate systems |
US20090135735A1 (en) * | 2007-11-27 | 2009-05-28 | Tellabs Operations, Inc. | Method and apparatus of RTP control protocol (RTCP) processing in real-time transport protocol (RTP) intermediate systems |
US8949470B2 (en) * | 2007-12-31 | 2015-02-03 | Genesys Telecommunications Laboratories, Inc. | Federated access |
US8904031B2 (en) * | 2007-12-31 | 2014-12-02 | Genesys Telecommunications Laboratories, Inc. | Federated uptake throttling |
US9003051B2 (en) * | 2008-04-11 | 2015-04-07 | Mobitv, Inc. | Content server media stream management |
US8015310B2 (en) | 2008-08-08 | 2011-09-06 | Cisco Technology, Inc. | Systems and methods of adaptive playout of delayed media streams |
US7886073B2 (en) * | 2008-08-08 | 2011-02-08 | Cisco Technology, Inc. | Systems and methods of reducing media stream delay |
US7969974B2 (en) * | 2008-10-15 | 2011-06-28 | Cisco Technology, Inc. | System and method for providing a multipath switchover between redundant streams |
US8239739B2 (en) | 2009-02-03 | 2012-08-07 | Cisco Technology, Inc. | Systems and methods of deferred error recovery |
US8711771B2 (en) * | 2009-03-03 | 2014-04-29 | Qualcomm Incorporated | Scalable header extension |
CN102577304B (zh) * | 2009-08-12 | 2015-12-09 | 荷兰皇家Kpn电信集团 | 动态转发第一协议的消息的方法和系统及其控制节点 |
US20110110382A1 (en) * | 2009-11-10 | 2011-05-12 | Cisco Technology, Inc., A Corporation Of California | Distribution of Packets Among PortChannel Groups of PortChannel Links |
FR2961651B1 (fr) * | 2010-06-22 | 2012-07-20 | Alcatel Lucent | Procede et dispositif de traitement de flux media entre une pluralite de terminaux media et une unite de traitement a travers un reseau de communication |
US8706889B2 (en) * | 2010-09-10 | 2014-04-22 | International Business Machines Corporation | Mitigating connection identifier collisions in a communication network |
CN102624752B (zh) * | 2011-01-26 | 2014-06-18 | 天脉聚源(北京)传媒科技有限公司 | 一种m3u8直播流防盗链方法和系统 |
US9769231B1 (en) * | 2011-04-01 | 2017-09-19 | Arris Enterprises Llc | QoS for adaptable HTTP video |
DE102011103740A1 (de) | 2011-05-31 | 2012-12-06 | Smartrac Ip B.V. | Verfahren und Anordnung zum Bereitstellen und Verwalten von mit RFID-Datenträgern verknüpften Informationen in einem Netzwerk |
CN102968422B (zh) * | 2011-08-31 | 2015-06-17 | 中国航天科工集团第二研究院七0六所 | 流数据存储控制系统及其方法 |
US9176912B2 (en) * | 2011-09-07 | 2015-11-03 | Altera Corporation | Processor to message-based network interface using speculative techniques |
WO2013100986A1 (en) * | 2011-12-28 | 2013-07-04 | Intel Corporation | Systems and methods for integrated metadata insertion in a video encoding system |
US20140112636A1 (en) * | 2012-10-19 | 2014-04-24 | Arcsoft Hangzhou Co., Ltd. | Video Playback System and Related Method of Sharing Video from a Source Device on a Wireless Display |
US9148379B1 (en) * | 2013-01-09 | 2015-09-29 | “Intermind” société à responsabilité limitée | Method and system for prioritizing audio traffic in IP networks |
US10161993B2 (en) | 2013-02-21 | 2018-12-25 | Advantest Corporation | Tester with acceleration on memory and acceleration for automatic pattern generation within a FPGA block |
US11009550B2 (en) | 2013-02-21 | 2021-05-18 | Advantest Corporation | Test architecture with an FPGA based test board to simulate a DUT or end-point |
US10162007B2 (en) * | 2013-02-21 | 2018-12-25 | Advantest Corporation | Test architecture having multiple FPGA based hardware accelerator blocks for testing multiple DUTs independently |
US9952276B2 (en) | 2013-02-21 | 2018-04-24 | Advantest Corporation | Tester with mixed protocol engine in a FPGA block |
CN103354522B (zh) * | 2013-06-28 | 2016-08-10 | 华为技术有限公司 | 一种多级流表查找方法和装置 |
US9275168B2 (en) | 2013-07-19 | 2016-03-01 | International Business Machines Corporation | Hardware projection of fixed and variable length columns of database tables |
US9235564B2 (en) | 2013-07-19 | 2016-01-12 | International Business Machines Corporation | Offloading projection of fixed and variable length database columns |
JP6268066B2 (ja) | 2013-09-20 | 2018-01-24 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 送信方法、受信方法、送信装置及び受信装置 |
RU2661762C2 (ru) | 2013-11-27 | 2018-07-19 | Телефонактиеболагет Л М Эрикссон (Пабл) | Гибридный формат полезной нагрузки rtp |
WO2016144366A1 (en) * | 2014-03-12 | 2016-09-15 | Infinesse Corporation | Real-time transport protocol (rtp) media conference server routing engine |
US10015048B2 (en) | 2014-12-27 | 2018-07-03 | Intel Corporation | Programmable protocol parser for NIC classification and queue assignments |
US9912774B2 (en) | 2015-12-22 | 2018-03-06 | Intel Corporation | Accelerated network packet processing |
US10735438B2 (en) * | 2016-01-06 | 2020-08-04 | New York University | System, method and computer-accessible medium for network intrusion detection |
US10970133B2 (en) | 2016-04-20 | 2021-04-06 | International Business Machines Corporation | System and method for hardware acceleration for operator parallelization with streams |
US10067809B2 (en) | 2016-04-20 | 2018-09-04 | International Business Machines Corporation | System and method for batch transport using hardware accelerators |
KR102610480B1 (ko) * | 2016-09-26 | 2023-12-06 | 삼성전자 주식회사 | 스트리밍 서비스를 제공하는 방법 및 장치 |
US10419366B1 (en) | 2017-01-31 | 2019-09-17 | Barefoot Networks, Inc. | Mechanism for communicating to remote control plane from forwarding element |
CN106940673A (zh) * | 2017-03-15 | 2017-07-11 | 郑州云海信息技术有限公司 | 一种监测项间隔智能调整方法及系统 |
US10757028B1 (en) | 2017-04-23 | 2020-08-25 | Barefoot Networks, Inc. | Configurable forwarding element deparser |
US10523578B1 (en) | 2017-07-23 | 2019-12-31 | Barefoot Networks, Inc. | Transmission of traffic management data to processing pipeline |
US10594630B1 (en) | 2017-09-28 | 2020-03-17 | Barefoot Networks, Inc. | Expansion of packet data within processing pipeline |
US11349899B2 (en) * | 2018-05-24 | 2022-05-31 | SmartHome Ventures, LLC | Protocol conversion of a video stream |
US10976361B2 (en) | 2018-12-20 | 2021-04-13 | Advantest Corporation | Automated test equipment (ATE) support framework for solid state device (SSD) odd sector sizes and protection modes |
CN111510394B (zh) | 2019-01-31 | 2022-04-12 | 华为技术有限公司 | 一种报文调度方法、相关设备及计算机存储介质 |
US11137910B2 (en) | 2019-03-04 | 2021-10-05 | Advantest Corporation | Fast address to sector number/offset translation to support odd sector size testing |
US11237202B2 (en) | 2019-03-12 | 2022-02-01 | Advantest Corporation | Non-standard sector size system support for SSD testing |
US10884847B1 (en) | 2019-08-20 | 2021-01-05 | Advantest Corporation | Fast parallel CRC determination to support SSD testing |
US11706163B2 (en) * | 2019-12-20 | 2023-07-18 | The Board Of Trustees Of The University Of Illinois | Accelerating distributed reinforcement learning with in-switch computing |
US11601355B2 (en) * | 2021-03-16 | 2023-03-07 | Dell Products L.P. | Contextual bandwidth management of audio/video conference |
US20220303150A1 (en) * | 2021-03-16 | 2022-09-22 | Zoom Video Communications, Inc | Systems and methods for video conference acceleration |
KR20240065966A (ko) * | 2022-11-07 | 2024-05-14 | 엑사비스 주식회사 | 효율적으로 데이터를 저장하는 네트워크 검사 방법 및 이를 수행하는 시스템 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6543053B1 (en) * | 1996-11-27 | 2003-04-01 | University Of Hong Kong | Interactive video-on-demand system |
US6173333B1 (en) * | 1997-07-18 | 2001-01-09 | Interprophet Corporation | TCP/IP network accelerator system and method which identifies classes of packet traffic for predictable protocols |
US6977930B1 (en) * | 2000-02-14 | 2005-12-20 | Cisco Technology, Inc. | Pipelined packet switching and queuing architecture |
US7032031B2 (en) * | 2000-06-23 | 2006-04-18 | Cloudshield Technologies, Inc. | Edge adapter apparatus and method |
US20020107971A1 (en) * | 2000-11-07 | 2002-08-08 | Bailey Brian W. | Network transport accelerator |
US20020161911A1 (en) * | 2001-04-19 | 2002-10-31 | Thomas Pinckney | Systems and methods for efficient memory allocation for streaming of multimedia files |
US20040128342A1 (en) * | 2002-12-31 | 2004-07-01 | International Business Machines Corporation | System and method for providing multi-modal interactive streaming media applications |
US7701884B2 (en) * | 2004-04-19 | 2010-04-20 | Insors Integrated Communications | Network communications bandwidth control |
-
2006
- 2006-10-06 US US12/089,485 patent/US20090147787A1/en not_active Abandoned
- 2006-10-06 JP JP2008534731A patent/JP2009512279A/ja active Pending
- 2006-10-06 DE DE112006002677T patent/DE112006002677T5/de not_active Withdrawn
- 2006-10-06 DE DE112006002644T patent/DE112006002644T5/de not_active Withdrawn
- 2006-10-06 US US12/089,509 patent/US20080285571A1/en not_active Abandoned
- 2006-10-06 WO PCT/US2006/039224 patent/WO2007044563A1/en active Search and Examination
- 2006-10-06 GB GB0805654A patent/GB2448799A/en not_active Withdrawn
- 2006-10-06 KR KR1020087010946A patent/KR100926007B1/ko not_active IP Right Cessation
- 2006-10-06 WO PCT/US2006/039223 patent/WO2007044562A1/en active Search and Examination
- 2006-10-06 JP JP2008534732A patent/JP2009512280A/ja not_active Withdrawn
- 2006-10-06 GB GB0805653A patent/GB2444675A/en not_active Withdrawn
- 2006-10-06 KR KR1020087010945A patent/KR20080068690A/ko not_active Application Discontinuation
Also Published As
Publication number | Publication date |
---|---|
GB2448799A (en) | 2008-10-29 |
WO2007044562A1 (en) | 2007-04-19 |
US20090147787A1 (en) | 2009-06-11 |
WO2007044563A1 (en) | 2007-04-19 |
GB2444675A (en) | 2008-06-11 |
GB0805653D0 (en) | 2008-04-30 |
KR100926007B1 (ko) | 2009-11-11 |
DE112006002677T5 (de) | 2008-11-13 |
DE112006002644T5 (de) | 2008-09-18 |
GB0805654D0 (en) | 2008-04-30 |
US20080285571A1 (en) | 2008-11-20 |
KR20080068691A (ko) | 2008-07-23 |
KR20080068690A (ko) | 2008-07-23 |
JP2009512280A (ja) | 2009-03-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2009512279A (ja) | ストリーミングと制御処理に異なる素子を用いたメディアデータ処理 | |
US7675939B2 (en) | Transmission apparatus and method, reception apparatus and method, communication system, recording medium, and program | |
CN101352012A (zh) | 使用不同元件对流进行媒体数据处理以及控制方法 | |
US7069332B2 (en) | Video server for video distribution system | |
EP2365449B1 (en) | Embedding a session description message in a real-time control protocol (RTCP) message | |
US7831603B2 (en) | System and method for transmitting media based files | |
US8649395B2 (en) | Protocol stack using shared memory | |
US10645131B2 (en) | Seamless switching between multicast video streams | |
EP1601161B1 (en) | Network interface card for supporting multi-streaming format and method thereof | |
US20070022183A1 (en) | Media recording functions in a streaming media server | |
EP1599003A1 (en) | Transmission/reception system, transmitting device and method, and receiving device and method | |
US6977934B1 (en) | Data transport | |
JP2010504652A (ja) | ビデオネットワークを管理する方法及びシステム | |
EP3096524B1 (en) | Communication apparatus, communication data generation method, and communication data processing method | |
EP1676216B1 (en) | Embedding a session description (SDP) message in a real-time control protocol (RTCP) message | |
Zimmerman et al. | Retransmission-based error control in a many-to-many client-server environment | |
KR100259821B1 (ko) | 비디오 서버에서 알티피 헤더의 알티씨피의 운영방법 | |
KR20240027435A (ko) | 실시간 데이터 송수신 방법 및 그 장치 | |
JP4201719B2 (ja) | 通信装置 | |
JP2006229844A (ja) | コンテンツ送信サーバ、システム及びサーバプログラム | |
JP2008271176A (ja) | ストリーム受信装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090904 |
|
A072 | Dismissal of procedure [no reply to invitation to correct request for examination] |
Free format text: JAPANESE INTERMEDIATE CODE: A073 Effective date: 20110111 |