JP5148716B2 - 集約されたクライアントパケットのトランスポート - Google Patents

集約されたクライアントパケットのトランスポート Download PDF

Info

Publication number
JP5148716B2
JP5148716B2 JP2010538597A JP2010538597A JP5148716B2 JP 5148716 B2 JP5148716 B2 JP 5148716B2 JP 2010538597 A JP2010538597 A JP 2010538597A JP 2010538597 A JP2010538597 A JP 2010538597A JP 5148716 B2 JP5148716 B2 JP 5148716B2
Authority
JP
Japan
Prior art keywords
packets
packet
network
container
timing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010538597A
Other languages
English (en)
Other versions
JP2011507430A (ja
Inventor
ラオテンシユラガー,ボルフラム
Original Assignee
アルカテル−ルーセント
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アルカテル−ルーセント filed Critical アルカテル−ルーセント
Publication of JP2011507430A publication Critical patent/JP2011507430A/ja
Application granted granted Critical
Publication of JP5148716B2 publication Critical patent/JP5148716B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/16Time-division multiplex systems in which the time allocation to individual channels within a transmission cycle is variable, e.g. to accommodate varying complexity of signals, to vary number of channels transmitted
    • H04J3/1605Fixed allocated frame structures
    • H04J3/1611Synchronous digital hierarchy [SDH] or SONET
    • H04J3/1617Synchronous digital hierarchy [SDH] or SONET carrying packets or ATM cells
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/28Flow control; Congestion control in relation to timing considerations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/50Queue scheduling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/50Queue scheduling
    • H04L47/56Queue scheduling implementing delay-aware scheduling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/50Queue scheduling
    • H04L47/62Queue scheduling characterised by scheduling criteria
    • H04L47/625Queue scheduling characterised by scheduling criteria for service slots or service orders
    • H04L47/627Queue scheduling characterised by scheduling criteria for service slots or service orders policing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J2203/00Aspects of optical multiplex systems other than those covered by H04J14/05 and H04J14/07
    • H04J2203/0001Provisions for broadband connections in integrated services digital network using frames of the Optical Transport Network [OTN] or using synchronous transfer mode [STM], e.g. SONET, SDH
    • H04J2203/0089Multiplexing, e.g. coding, scrambling, SONET
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/54Store-and-forward switching systems 
    • H04L12/56Packet switching systems
    • H04L12/5601Transfer mode dependent, e.g. ATM
    • H04L2012/5638Services, e.g. multimedia, GOS, QOS
    • H04L2012/5646Cell characteristics, e.g. loss, delay, jitter, sequence integrity
    • H04L2012/5649Cell delay or jitter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/54Store-and-forward switching systems 
    • H04L12/56Packet switching systems
    • H04L12/5601Transfer mode dependent, e.g. ATM
    • H04L2012/5672Multiplexing, e.g. coding, scrambling
    • H04L2012/5674Synchronisation, timing recovery or alignment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/54Store-and-forward switching systems 
    • H04L12/56Packet switching systems
    • H04L12/5601Transfer mode dependent, e.g. ATM
    • H04L2012/5678Traffic aspects, e.g. arbitration, load balancing, smoothing, buffer management
    • H04L2012/5679Arbitration or scheduling

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Packages (AREA)
  • Communication Control (AREA)

Description

本発明は、光通信に関し、詳細には、パケットトランスポートネットワークを介して1つまたは複数のクライアント信号の集約されたパケットを伝送する方法に関する。さらに、本発明は、そのようなパケットトランスポートネットワークのためのネットワーク要素、およびパケットトランスポートネットワーク自体に関する。
パケットネットワークにおいて、パケットサイズ、データ転送速度、および転送遅延の3つの要素が、本質的に互いに結び付いている。パケット、例えば、イーサネット(登録商標)パケットは、エンドユーザアプリケーションのニーズに対して、特に、アプリケーションに関して許容可能な転送遅延をもたらすことに対して、通常、サイズがよく適合している。エンドユーザの通常のデータ転送速度において、パケットサイズは、人間の時間的知覚限界を下回る転送遅延をもたらすように大きさが決められている。例えば、1000バイトのサイズを有するイーサネット(登録商標)パケットは、毎秒64キロビットのデータ転送速度を有する音声呼データによって埋められるのに125ミリ秒かかり、その結果、125ミリ秒の範囲内の転送遅延をもたらす。このため、小さいエンドユーザデータ転送速度で実行されるアプリケーションは、小さいパケットサイズを好み、これにより、人間の時間的知覚限界を下回るように転送遅延を低減する。
コアネットワークにおいて、パケットのさらなるパケットサイズ依存の転送遅延は、アプリケーションデータ転送速度からコアデータ転送速度に速度が上げられることにより、より小さい。しかし、アプリケーション(特に、例えば、毎秒10メガビットのデータ転送速度を有するビデオストリーミングアプリケーションなどの高いデータ転送速度を有するアプリケーション)は、他の遅延寄与のため、この小さい転送遅延の利益を受けることができない。例えば、コアネットワークにおける1000キロメートルの距離のファイバ伝搬遅延は、5ミリ秒の範囲内にある(パケットサイズとは無関係に)のに対して、そのようなコアネットワークのノードにおいて、1000バイトのサイズを有するパケットのパケットサイズ依存の転送遅延は、他のすべての遅延寄与よりはるかに小さい1マイクロ秒という小ささである。このため、コアネットワークにおける全体的な追加の転送遅延は、コアネットワークにおける小さいパケットサイズ依存の転送遅延によって支配されるのではなく、大部分、他の遅延寄与によって決まる。また、コアネットワークにおけるパケットサイズ依存の転送遅延が小さいことは、より大きいパケットサイズを許しもする。しかし、前述したとおり、通常、パケットサイズは、ユーザアプリケーションのニーズによって決定される。
プロトコルパケットは、さらに小さいパケットサイズを有することが可能である。最小のパケットの中には、64バイトのサイズを有する、広く使用されるTCP(伝送制御プロトコル)ACKパケットがある。このパケットは、TCPにおいてパケットの受信を確認するために使用され、既存のインターネット慣行において避けることができない。
高速コアネットワークにおいて、クライアントトラフィックは、容量で集約され、それでも、それぞれの個別のクライアントパケットが、コアにおいて個々に転送される。このため、パケット粒度は、エンドユーザアプリケーションからコアネットワークで変化しない。コアネットワークの入口ノードにおいて、各クライアントパケットは、T−MPLS(トランスポートマルチプロトコルラベルスイッチング)、PBB(プロバイダバックボーンブリッジ)、またはMAC−in−MACのような1:1カプセル化技術の使用によって、コアネットワークを介する伝送のために別々にカプセル化されることが可能であり、すなわち、1つのイーサネット(登録商標)パケットが、別のイーサネット(登録商標)パケットの中にカプセル化されることが可能である。カプセル化されたパケットは、不透明であり、すなわち、コアネットワークには不可視である。
コアネットワークにおける高いデータ転送速度において、ユーザアプリケーションによって決定された不変のパケットサイズは、各パケットのヘッダがコアネットワークにおいて処理されるので、コアネットワークにおける同一のパケット(または別のパケットの中に1:1カプセル化された)の効率的なトランスポートのためには余りにも小さ過ぎる。コアネットワークのライン速度が高いほど、ヘッダ処理のための労力も大きい。さらに、コアネットワーク要素のパケット処理能力は、最大負荷および最小パケットサイズという最悪ケースにおいてさえ、十分であるように設計されなければならない。そのようなシナリオは、生じる可能性が低いが、安全には排除され得ない。このため、毎秒10ギガビットのため、毎秒100ギガビット以上のため、例えば、毎秒100ギガビットのイーサネット(登録商標)のためのコアネットワークラインカードにおいて、パケットのヘッダ処理は、電力およびシリコン面積を最も多く消費するタスクである。
ヘッダ処理の労力を減らすためのよく知られたアプローチは、より小さいサイズのパケットを、より大きいサイズのコンテナの中に集約することであり、例えば、OBS(光バーストスイッチング)において、パケットを、より大きいコンテナ(バーストまたはフレームとも呼ばれる)の中に入れてバースト化することが、使用される。ネットワーク入口ノードにおいて、同一の宛先を有するパケットが、蓄積されて、コンテナの中に集約され、このコンテナが、次に、不透明なエンティティとしてコアネットワークを通って移動させられる。それぞれのネットワーク出口ノードにおいてだけ、このコンテナは、アンロードされ、包含されるパケットが、クライアントネットワークに解放される。OBSにおいて、パケットをコンテナの中に集約することは、光学デバイスのスイッチング速度が低いために、必要である。集約なしには、光学デバイスは、パケットに関して切り換えられなければならず、このことは、可能ではない。電子スイッチングまたは光電子スイッチングの場合、パケットを蓄積し、これらの蓄積されたパケットをコンテナの中に集約するという概念は、コアスイッチにおける毎秒のパケットカウントを減らすために再使用されることも可能である。
コンテナの中に集約し、そのようなコンテナを集約解除するプロセスは、少なくとも2つの欠点をもたらす。
1.低い負荷の場合、最初(すなわち、集約前に)、よく分離されていたまばらなパケットが、コンテナの中でパケットのタイミングが失われるので、コアネットワークを介する伝送の後、パケットのバーストの中でひとかたまりになっている可能性がある。このことは、コアネットワークの出口ノードの下流にある、より下位のネットワークに問題をもたらす。
2.そのようなコアネットワークの入口ノードにおける可変のトラフィック負荷は、コンテナのためにパケットを蓄積することに関して、可変の蓄積時間をさらにもたらす。蓄積時間の、この不確実性は、コンテナの間で遅延の時間的ばらつきをもたらし、このため、集約解除の後のパケット着信の大きいジッタをもたらす。そのようなジッタは、例えば、一定のパケット時間距離を必要とするストリーミングアプリケーションには問題である。
以下に、集約解除後のパケットフローの高いバースト性の問題を詳細に説明する。
境界に、より低速のアクセスネットワークを有し、中間に高速のコアネットワークを有する階層ネットワークにおいて、パケットフローのタイミングは、極めて重要なパラメータである。通常、パケットフローは、送信元ネットワークによって自然にシェーピングされる。パケット間の時間的距離は、伝送が、送信元ネットワークにも、受信側ネットワークにも過負荷をかけないことを確実にする。コアネットワークは、他のトラフィックによる負荷とは無関係に、さらに個々のフローの明示的な知識なしに、パケットフローのタイミングを保たなければならない。このことは、WFQ(Weighted Fair Queuing)またはWRR(Weighted Round Robin)のようなキューイングスキームおよびスケジューリングスキームを使用することによって、確実にされる。
高速コアネットワークを介してクライアントパケットを伝送することに関して、クライアント信号の細粒度のパケットは、例えば、SDH(ITU−T G.701において規定される同期デジタル階層)、SONET(Telcordia社からのGR−253−COREにおいて規定される同期光ネットワーキング)、またはOTN(ITU−T G.709において規定される光トランスポートネットワーク)の場合に、より大きいトランスポートコンテナの中に入れられて、通常、カプセル化される。これらすべてのトランスポートプロトコルは、コンテナが、連続して移動するTDM(時分割多重化)エンティティ(同期トラフィック)であり、つまり、コンテナが、コンテナのロードにかかわらず、トランスポートプロトコルのデータ転送速度に従って、連続して生成されて、伝送されるという共通点を有する。クライアントパケットは、オンザフライでコンテナの中にマッピングして入れられる。散発的なパケットストリームの場合、コンテナは、必要に応じて、アイドルパターンによって埋められる。このため、互いに対するパケットの相対的タイミングは、そのような高速ネットワークの入口ノードから、そのようなネットワークの出口ノードまで変化しない。
このことは、パケットを蓄積すること、および蓄積されたパケットをコンテナの中に集約することを伴うパケットトランスポートネットワークにおいて、例えば、バースト交換ネットワークまたはフレーム交換ネットワークにおいて通常は当てはまらない。そのようなネットワークは、依然として、研究されており、まだ完全に標準化されていない。そのようなネットワークにおいて、複数の小さいクライアントパケットが、ネットワークコアにおけるスイッチングオーバーヘッドを節約するように、より大きいコンテナの中に集約される。
バースト交換ネットワークは、OBSの概念に基づく。バースト交換ネットワークにおいて、1つまたは複数のクライアント信号のより小さいパケットが、或る特定の出口ノードに伝送されるべき、より大きいバーストの中に集約される。ネットワークを介してバーストを伝送する際、ネットワークの光バーストスイッチが、ネットワークの入口ノードから、それぞれの出口ノードまで個別のバーストを転送するように切り換えられる。
また、フレーム交換ネットワークにおいて、1つまたは複数のクライアント信号の複数のより小さいパケットが、より大きいフレームの中に集約される。フレーム(負荷に依存する)を埋めた後、フレームは、個別のエンティティとして同期高速トランスポートストリームに入るように切り換えられる。G.Eilenbergerの論文、「Long term network architectures and scenarios based on optical burst/packet switching」、Proceedings of SPIE、AsiaPacific Optical Communications 2006、2006年9月、韓国光州市、Vol.6354が、セクション3.1において、G.709標準の変形に基づくフレーム交換ネットワークの例を開示している。この開示は、参照により本明細書に組み込まれている。フレームが、ネットワークのノード内部で個々のエンティティとして切り換えられる一方で、ノード間の伝送リンクは、G.709に準拠する連続的な同期伝送を維持する。追加/ドロップマルチプレクサにおいて、クライアントインタフェース信号が、フレーム集約ユニットによって、適応されたG.709フレームフォーマットに入るように集約される。フレームを埋めた後、フレームは、同期トランスポートストリームに入るように個々に切り換えられ、すなわち、フレームは、固定の周期で高速トランスポートストリームに入るように周期的に切り換えられることはない。
バースト交換ネットワークおよびフレーム交換ネットワークにおいて、通常、完成を待ってから伝送される、複数のクライアントパケットを含む、より大きいサイズのコンテナ(すなわちバースト交換ネットワークの場合、バースト、フレーム交換ネットワークの場合、フレーム)が、使用される。そしてコンテナの完成は、実際のトラフィック負荷に依存する。パケット間のアイドルパターンは、例えば低いトラフィック負荷の場合、一般には使用されない。クライアントパケットは、入口ノードにおける相対的タイミングにかかわらず、次々にコンテナの中にカプセル化される。充填パターンは、コンテナの終わりになって初めて出現することが可能である。出口ノードにおいて、コンテナの中のカプセル化されたパケットは、アンロードされて、アクセスネットワーク(またはメトロネットワーク)に解放される。しかし、この時点で、パケット間の元のタイミングは、もはや利用可能ではない。トラフィック負荷に依存して、クライアントパケットは、バーストの中で一緒にひとかたまりにされる可能性がある。このことは、下流のネットワークバッファにかかる高い負担をもたらす。特に、低いトラフィック負荷の場合、出口ノードにおけるパケットフローの高いバースト性が、容易に生じる可能性がある。そのような高いバースト性は、パケットが入口ノードに入った際、存在していなかった。
この問題は、図1から図3を参照して、より詳細に説明される。
図1は、従来の同期高速コアネットワーク(例えば、SDHネットワーク)と、境界における1つまたは複数の、より低速のアクセスネットワークまたはメトロネットワークとを有する従来の階層ネットワークにおけるクライアントパケットフローを示す。通常、より低い速度のアクセスネットワークは、さらに下位の配信ネットワークに接続される。例えば、企業ネットワーク内に位置する送信側ノード(近端)1から、より低いデータ転送速度のクライアント信号2が、アクセスネットワークを介して、高速コアネットワークの入口ノード3に伝送される。このより低いデータ転送速度のため、信号2のパケットは、図1に示される相対的に長い持続時間を有する。入口ノード3は、(データ転送速度を増加させることによって)パケット持続時間を短縮するための手段4と、これらのパケットを他のクライアント信号と一緒に多重化して、連続的な高速トランスポート信号6、例えば、毎秒10ギガビットのSDH信号の中に入れるための多重化手段5とを提供する。別々のユニットとして示されるものの、通常、手段4と手段5はともに、単一のユニット内で実現される。コアネットワークを介して出口ノード7に伝送した後、プロセスは、逆転される、すなわち、受信された高速トランスポート信号6が、逆多重化手段8によって様々なクライアント信号に逆多重化されて、この逆多重化された信号のパケット持続時間が、適切な手段9によって増加させられる。出口ノード7から、クライアント信号10は、より低速のアクセスネットワーク、および他の、より下位の配信ネットワークを介して宛先に転送される。図1に示される遠端11は、パケットフローがバースト性である場合に問題が生じる可能性がある、宛先より前の最後の中間ノード(例えば、フロア配線盤またはDSLアクセスマルチプレクサ)の1つを表し、すなわち、遠端11は、出口ノード7の背後のボトルネックを表す。しかし、図1に示されるとおり、入口ノード3における信号2の受信されたパケットのフローは、出口ノード7における信号10の転送されたパケットのフローに対応し、すなわち、フロー形状は保たれており、全く問題は生じない。
図2は、重い負荷の場合に負荷依存のコンテナ生成を伴うバースト交換コアネットワークまたはフレーム交換コアネットワークを有する階層ネットワークにおけるクライアントパケットフローを示す。同一の符号によって表される図1と図2における図示される要素は、基本的に同一である。図2において、多重化手段5’が、様々なクライアント信号のパケットをコンテナ20a−cの中に集約するためにさらに構成され、さらに逆多重化手段8’がやはり、コンテナ20a−cからパケットを抽出するために構成される。クライアントパケットは、入口ノードにおける相対的タイミングにかかわらず、コンテナの中に次々に入れられる。重い負荷の場合、1つのクライアント信号の限られた数のパケット(この場合、1つのコンテナ当たり1つのパケット)が、1つのコンテナの中に集約される。出口ノード7においてクライアント信号2のパケットを抽出し、手段9においてパケット持続時間を適応させた後、これらのパケットは、宛先に転送される。図2に示されるとおり、入口ノード3’における信号2の受信されたパケットのフローは、出口ノード7における信号10の転送されたパケットのフローに基本的に対応する。このため、コンテナの中に集約することは、フロー形状を全く乱さない、または無視できるほどわずかしか乱さない。
図3は、図2のネットワークの負荷が低い場合におけるクライアントパケットフローを示す。同一の符号によって表される図2と図3における図示される要素は、基本的に同一である。図3における低い負荷のため、クライアント信号の、より多くのパケットが、1つのコンテナの中に集約されることが可能であり、例えば、クライアント信号2の2つのパケットが、第1のコンテナ20dの中に集約されることが可能である。出口ノード7’においてクライアント信号2のパケットを抽出し、手段9においてパケット持続時間を適応させた後、これらのパケットは、一緒にひとかたまりにされ、遠端11における低速リンクに重点を置いている。出口ノード7におけるフローのそのような高いバースト性は、このバースト性が、遠端において一時的に過負荷を生じさせるので、下流のネットワークバッファに負担をかける。このことは、コンテナ交換トランスポートネットワークから遠く離れ、このネットワークを認識していない宛先ホストの近くのアクセススイッチ、または顧客によって所有されるスイッチにさえ、最小のバッファが、通常、設置されるので、さらに悪い。その結果、そのようなネットワークのコンテナの中にパケットを集約することは、トラフィック形状の変形を生じさせるだけでなく、現実の根本的原因から遠く離れて、接続の遠端で、適切な軽減の可能性が低い問題を生じさせる。
ITU−T G.701 GR−253−CORE ITU−T G.709 G.Eilenberger、「Long term network architectures and scenarios based on optical burst/packet switching」、Proceedings of SPIE、AsiaPacific Optical Communications 2006、2006年9月、韓国光州市、Vol.6354 ITU−T G.7041 IEEE802.3
このため、本発明の目的は、パケットトランスポートネットワークを介してクライアントパケットを伝送するための方法を提供することであり、この方法は、低減されたヘッダ処理能力を許す。この方法は、前述したとおり、出口ノードにおけるフローの高いバースト性の問題を克服しなければならない。本発明のさらなる目的は、そのようなパケットトランスポートネットワークの入口ノードおよび出口ノードのための対応するネットワーク要素を提供し、さらにそのようなネットワーク自体を提供することである。
これらの目的は、独立請求項による方法、ネットワーク要素、およびトランスポートネットワークによって達せられる。
本発明の第1の態様は、パケットトランスポートネットワークを介して1つまたは複数のクライアント信号(例えば、イーサネット(登録商標)信号、またはIP/PPP、すなわち、インターネットプロトコル/ポイントツーポイントプロトコル信号)を伝送するための方法に関する。
この方法は、パケットトランスポートネットワークの入口ノードにおいて、複数のパケットを、より大きいコンテナ(例えば、イーサネット(登録商標)ジャンボフレーム)の中に集約すること、特に、負荷に依存して集約することを、出口ノードにおいてクライアントフロータイミングを再現するための手段と組み合わせて提案する。
中間のノードにおいて、コンテナヘッダだけが処理され、パケットヘッダは処理されないことが可能である。このため、コンテナのヘッダだけが、コアネットワークに可視であり、カプセル化されたパケットのヘッダは、コアネットワークに可視ではない。そのような集約は、少なくとも1/100に最悪ケースのパケットヘッダ処理(例えば、毎秒10ギガビットまたは毎秒100ギガビットのイーサネット(登録商標)リンク)を減らすことができる。
本発明は、特に、実際のトラフィック負荷、およびこの負荷のばらつきとは無関係に、出口ノードにおいてクライアントフロータイミングを再現するための手段を提供することによって、集約に起因する問題(例えば、トラフィック形状問題、ジッタが生じる問題、および一般的なタイミング問題)に対処する。このため、学問的な研究で検討されるコンテナ集約の概念が、アクセス層およびアプリケーション層に悪影響を与えることなしに、生産的なネットワークにおいて使用されることが可能である。
入口ノードにおいて受信されたパケットのタイミング情報を決定し、さらにパケットトランスポートネットワークを介して、このタイミング情報を伝送することによって、コンテナの中のパケットの元の相対的パケットタイミングが、コアネットワークにおいて再構築されることが可能である。
ヘッダカウントは、基本的に一定(すなわち、実際のトラフィックとは無関係の)低いレベルに制限されることが可能である。低い負荷の場合、例えば、1つまたは2つのパケットだけがコンテナの中に含まれるのに対して、高い負荷の場合、多くのパケットが、コンテナの中にカプセル化される。両方の場合に、コアネットワークは、コンテナロードにかかわらず、コンテナのヘッダを処理するだけでよい。このことは、トランスポートネットワークにおいて、特に、トランスポートネットワークのスイッチにおいて、ヘッダ処理労力を低減する。このため、トランスポートネットワークにおけるネットワーク要素のヘッダ処理能力が、低減されることが可能であり、あるいは同一の処理能力で、全体のスループットが増加されることが可能である。
本発明の方法によれば、1つまたは複数のクライアント信号のパケットが、ネットワークの入口ノードで受信され、蓄積される。受信されたパケットのタイミングを特徴付けるタイミング情報が、決定され、これらの受信されたパケットが、コンテナの中にマッピングされる。例えば、パケット着信の相対的距離が、これらのパケットと一緒に格納される。このコンテナ、およびこのタイミング情報が、ネットワークを介して伝送される。好ましくは、このタイミング情報は、コンテナの一部として伝送される。ネットワークの出口ノードにおいて、これらのパケットが、コンテナから抽出され、これらのパケットは、伝送されたタイミング情報に基づいて、さらなる伝送のためにタイミング制御される。このタイミング制御は、パケットがコンテナから抽出される前に実行されても、抽出された後に実行されても、抽出されるのと同時に実行されてもよい。
提案される方法は、パケットをコンテナの中に集約する場合に、受信されたパケットのタイミングが失われないという利点をもたらす。代わりに、入口ノードにおける受信されたパケットのタイミングを特徴付けるタイミング情報が、決定され、出口ノードに伝送される。このため、伝送されたタイミング情報に基づいて、出口ノードにおける抽出されたパケットのタイミングが、入口ノードにおける受信されたパケットのタイミングに基本的に対応するように、出口ノードにおいてタイミングが、復元されることが可能である。このため、出口ノードにおける転送されたパケットフローの高いバースト性が、回避され、その結果、遠端における一時的過負荷の問題が回避される。つまり、アンロード段階において、パケット着信プロセスが、パケットと一緒に格納された、正しい出発距離を再確立することによって、模倣されることが可能である。
提案されるソリューションは、この問題をトランスペアレントに解決し、すなわち、このソリューションは、コンテナ集約およびコンテナ集約解除のプロセスにローカルであり、このソリューションは、コアにおけるアプリケーションフローの明確な認識を要求せず、さらにこのソリューションは、影響を受ける遠端のアクセスリンクには不可視である。このため、アプリケーションフロー形状は、個々のフローに特別な注意を払うことなしに、再現される。
本発明の方法を実施するために、コア出口ノードにおける集約解除のためのさらなる遅延、すなわち、さらなるバッファ空間が、要求される可能性がある。
本発明の方法は、クライアントパケットカプセル化を使用し、このため、T−MPLS(トランスポートマルチプロトコルラベルスイッチング)、PBB(プロバイダバックボーンブリッジ)、またはMAC−in−MACのような従来のクライアントパケットカプセル化スキームに適用可能であり得る。そのような従来の1:1(すなわち、1つのコンテナ当たり1つのパケット)のクライアントパケットカプセル化スキームは、1つのコンテナ当たり複数のパケットをサポートするように本発明の方法によって拡張されることが可能である。
集約されたトランスポートストリームは、標準のパケット技術、例えば、イーサネット(登録商標)に準拠することが可能である。
好ましくは、パケットのタイミング情報を決定するステップ、およびパケットをマッピングするステップは、変形されたGFP(汎用フレーミングプロシージャ)によって実行される。
ITU−T G.7041において規定される従来のGFPにおいて、異なるタイプ(例えば、イーサネット(登録商標)MAC、IP/PPP)のクライアントパケットが、汎用フレームフォーマットに入るように、すなわち、GFPコアヘッダと、GFPペイロード領域とを有するGFPクライアントデータフレームの中に入るように符号化される。詳細には、クライアントパケットは、GFPペイロード領域の中にマッピングされる。このGFPクライアントデータフレームが、次に、トランスポートプロトコルのフレーム、例えば、SDHフレーム、SONETフレーム、またはOTNフレームの中にマッピングされる。伝送のために利用可能なGFPフレームが全く存在しない場合、GFPアイドルフレームが、受信されたクライアントパケットの間に挿入される。GFPアイドルフレームは、充填フレームとして使用されて、任意の所与のトランスポート媒体にGFPストリームを適用させることを円滑にし、このトランスポート媒体は、クライアント信号によって要求されるより高いデータ容量を有する。このことは、フレームの連続的なストリームをもたらす。2005年8月のITU−T G.7041文書、特にGFPアイドルフレームと関係するコメントが、参照により本明細書に組み込まれている。
後続のGFPクライアントデータフレームの間の、したがって、後続のクライアントパケットの間のGFPアイドルフレームの数は、受信されるフレームのタイミングに依存し、さらには、入口ノードで受信されるクライアントパケットのタイミングに関する尺度である。
本発明の好ましい実施形態によれば、変形されたGFPによって、受信されたパケットを符号化する際、クライアントパケットの間のGFPアイドルフレームは、脱落させられ、2つのパケットの間の脱落したアイドルフレームが、カウンタによってカウントされる。脱落したアイドルフレームの数は、タイミング情報として使用される。
好ましくは、従来のGFPに基本的に準拠するデータストリームが、生成され、このデータストリームは、GFPアイドルフレームを有する。これらのGFPアイドルフレームが、除去され、後続のGFPクライアントデータフレーム(後続のクライアントパケットに対応する)の間の脱落したアイドルフレームが、カウントされる。代替として、GFPアイドルフレームを前もって挿入することなく、これらのフレームを後に除去することなしに、脱落したアイドルフレームをカウントしてもよい。
有利には、脱落したアイドルフレームのそれぞれの数は、GFPヘッダの予備フィールドの中に格納される。さらに、好ましくは、脱落したアイドルフレームのそれぞれの数は、それぞれの脱落したアイドルフレームの直後のGFPクライアントデータフレームの中に(特に、このフレームのヘッダの中に)格納される。
好ましくは、出口ノードにおいて、転送されるべきパケットは、脱落したアイドルフレームの数に基づいて、タイミング制御される。特に、このことは、脱落したアイドルフレームのそれぞれの数に従って、後続のGFPフレームの間にGFPアイドルフレームを挿入することによって実行されることが可能である。
前述したとおり、そのようなネットワークの入口ノードにおける可変のトラフィック負荷は、コンテナの中で伝送されるべきパケットを蓄積することに関する可変の蓄積時間をもたらす。蓄積時間の、この不確実性は、出口ノードにおけるコンテナ着信の時間的ばらつきをもたらし、このため、集約解除後のパケット着信の大きいジッタをもたらす。
この問題を克服するために、好ましくは、コンテナに関する最も早いパケットが、異なるコンテナの中のそれぞれの最も早いパケットを、基本的に一定である義務的な期間にわたって入口ノードと出口ノードにおいて同時に待つように取り計らう。好ましくは、完全な期間は、入口ノードの負荷に応じて、入口ノードと出口ノードの間で分割される。例えば、低い負荷の場合において、最も早いパケットは、入口ノードにおいて、より大きい時間間隔にわたって待ち(コンテナは、大きい時間間隔内に埋められるので)、出口ノードにおいて、より小さい時間間隔にわたって待つ。これとは対照的に、重い負荷の場合、最も早いパケットは、入口ノードにおいて、より小さい時間間隔にわたって待ち(コンテナは、小さい時間間隔内に埋められるので)、出口ノードにおいて、より長い時間間隔にわたって待つ(入口ノードにおける、より短い時間間隔を補償するように)。このため、トラフィック負荷に起因する入口ノードにおける蓄積時間の変化は、出口ノードにおける待機時間の逆の変化によって補償される。例えば、変形されたフレーミングプロシージャを、この着想と組み合わせて使用している場合、クライアントフロータイミングは、実際の負荷とは無関係に、正確に再現されることが可能である。
好ましい実施形態によれば、各パケットは、コンテナの中のすべてのパケット、さらに異なるコンテナの中のパケットを基本的に一定である期間にわたって入口ノードと出口ノードにおいて同時に義務的に待つ。このことは、異なるコンテナの中の最も早いパケットに関する待機時間が一定であり、各コンテナの中のその他のパケットのタイミングが、この最も早いパケットとの関係で出口ノードにおいて再構築される場合に当てはまる。
実際のパケットサイズ、密度、トラフィック負荷、またはコンテナ粒度にかかわらず、任意のパケットに関して一定の遅延は、光ファイバケーブル上のファイバ遅延と均等である。コンテナ交換コアの外部のネットワークアプリケーションは、両方の遅延寄与を区別することができない。
好ましくは、それぞれのコンテナの中で伝送されるべき、最も早い受信されたパケットに関して、所定のタイムアウト期間に達したかどうかが、入口ノードにおいて監視される。最悪ケースにおいて、最も早いパケットは、タイムアウト期間まで入口ノードにおいて待つ。タイムアウト期間に達した場合、コンテナは、そのコンテナが一杯であるかどうかにかかわらず、伝送の準備ができている。タイムアウト期間に達することは、非常に低い負荷の場合に生じる。通常の負荷、または重い負荷の場合、入口ノードにおける蓄積されたパケットが、コンテナ容量の所定の部分(例えば、完全なコンテナ容量)に既に達している際、最も早いパケットに関してタイムアウト期間の一部分だけしか、経過していない。
入口ノードにおいて、コンテナは、(非常に低い負荷の場合)最も早いパケットに関して所定のタイムアウト期間に達すると、または(通常の負荷、または重い負荷の場合)入口ノードにおける蓄積したパケットが、コンテナ容量の所定の部分に達すると、伝送の準備ができている。出口ノードにおいて、最も早いパケットは、タイムアウト期間の経過していない部分(すなわち、タイムアウト期間に達している場合、0であることが可能な、タイムアウト期間の残り)に基づいてタイミング制御され、さらにコンテナの中の残りのパケットは、タイミング情報に基づいてタイミング制御されて、コンテナの中のパケットの、互いに対する相対的タイミングが再現される。最も早いパケットは、タイムアウト期間の経過していない部分にわたって正確に待った後、伝送のために義務的に解放されるわけではないことに留意されたい。最も早いパケットは、すべてのパケットに関して一定である、さらなる遅延を伴って、後に解放されてもよい。
最も早いパケットに関する合計待機時間は、タイムアウト期間の経過した部分(入口ノードにおける待機時間または累積時間に相当する)に、タイムアウト期間の経過していない部分(出口ノードにおける待機に相当する)を足した結果であることが可能である。もちろん、最も早いパケットに関する合計待機時間は、例えば、出口ノードにおいて、一定の遅延分だけ増加されてもよい。
好ましい実施形態によれば、入口ノードにおいて、パケットは、第1のバッファの中、例えば、第1のFIFOバッファ(先入れ先出し)の中に蓄積される。出口ノードにおいて、受信されたコンテナのコンテンツは、第2のバッファの中、例えば、第2のFIFOバッファの中に格納される。
したがって、好ましくは、コンテナに関する最も早いパケットは、異なるコンテナの中のそれぞれの最も早いパケットを基本的に一定である義務的な期間にわたって第1のバッファと第2のバッファの中で同時に待つように取り計らう。より好ましくは、各パケットは、コンテナの中のすべてのパケットを、さらに異なるコンテナの中のパケットに関して基本的に一定である期間にわたって第1のバッファと第2のバッファの中で同時に義務的に待つ。
好ましくは、それぞれのコンテナの中で伝送されるべき第1のバッファの中の最も早いパケット(すなわち、FIFOバッファの第1のパケット)に関して、所定のタイムアウト期間に達したかどうかが監視される。また、第1のバッファが、所定の充填サイズ(例えば、最大コンテナペイロードサイズに対応する充填サイズ)に達したかどうかも監視される。
第1のバッファのコンテンツは、(非常に低い負荷の場合)最も早いパケットに関して所定のタイムアウト期間に達すると、または(通常の負荷、または重い負荷の場合)第1のバッファが、所定の充填サイズに達すると、伝送の準備ができている(例えば、第1のバッファのコンテンツをコンテナフレームの中に格納し、パケット間の着信距離を、パケットと一緒にコンテナの中に格納し、さらにタイムアウト期間の経過していない部分をコンテナの中に格納して)。
最も早いパケットは、タイムアウト期間の経過していない部分に基づいて(すなわち、タイムアウト期間の残りに基づいて)タイミング制御されて、出口ノードにおいて第2のバッファから解放される。このため、入口ノードにおける蓄積時間の変化は、出口ノードにおいて解放することに関する時間の、逆の意図的な変化によって補償される。コンテナの中の残りのパケットは、タイミング情報に基づいてタイミング制御されて、第2のバッファから解放されて、パケットの、互いに対する相対的タイミングが再現される。「タイムアウト期間の経過していない部分に基づいてタイミング制御される」とは、最も早いパケットが、タイムアウト期間の経過していない部分を待った直後に、伝送のために必然的に解放されることは意味しないことに留意されたい。最も早いパケットは、すべてのパケットに関して一定である、さらなる遅延を伴って、後に解放されてもよい。
有利には、最も早いパケットと関係するタイミング情報は、入口ノードにおいて決定され、ネットワークを介して伝送されもする。最も早いパケットと関係する、伝送されるタイミング情報は、タイムアウト期間の経過していない部分を示すことも可能である。最も早いパケットのタイミング情報は、タイムアウト期間の経過していない部分に設定されることが可能である。そのような経過していない部分は、タイムアウト期間に達している場合、0であることが可能である。
好ましい実施形態によれば、コンテナは、イーサネット(登録商標)ジャンボフレームである。IEEE802.3によれば、イーサネット(登録商標)フレームは、1518バイト(IPの場合、1500バイト)の最大サイズを有する。ジャンボフレームは、すべて、1518バイト(1500バイト)という、このサイズを超えるイーサネット(登録商標)フレーム、例えば、9.6キロバイト以上のサイズを有するイーサネット(登録商標)フレームである。
本発明は、毎秒10ギガビットまたは毎秒100ギガビットのイーサネット(登録商標)トランスポートネットワークのために使用されることが可能である。毎秒100ギガビットは、純粋なトランスポート技術であり、アプリケーションは、毎秒100ギガビットで動作するものと予期されない。このため、潜在的にすべての毎秒100ギガビットのイーサネット(登録商標)製品が、本発明から利益を受けることが可能である。
本発明の前述した実施形態は、任意の組み合わされることが可能であることに留意されたい。特に、変形された汎用フレーミングプロシージャによってクライアントパケットを符号化するという概念が、入口ノードと出口ノードにおいて一定の待機時間を設けるという概念と組み合わされることが可能である。さらに、本発明の開示は、従属請求項における後方参照によって明示的に与えられる請求項組み合わせ以外の他の請求項組み合わせも範囲に含み、すなわち、請求項は、基本的に任意の順序で組み合わされることが可能であることに留意されたい。
本発明の第2の態様は、パケットトランスポートネットワークの入口ノードのためのネットワーク要素に関する。このネットワーク要素は、ネットワークを介して伝送されるべき1つまたは複数のクライアント信号のパケットを受信し、蓄積するように構成される。このネットワーク要素は、パケットのタイミングを特徴付けるタイミング情報を決定するための決定手段を備える。さらに、受信されたパケットをコンテナの中にマッピングするためのマッピング手段が、提供される。また、ネットワークは、ネットワークを介してコンテナおよびタイミング情報を伝送するための伝送手段を備える。
本発明の第3の態様は、そのようなネットワークの出口ノードのためのネットワーク要素に関する。このネットワーク要素は、本発明の第2の態様によるネットワーク要素によってマッピングされたコンテナを受信するために構成される。出口ノードに関するネットワーク要素は、コンテナからパケットを抽出するための抽出手段と、タイミング情報に基づいて、さらなる伝送のためにパケットをタイミング制御するためのタイミング手段とを備える。
本発明の第4の態様は、パケットトランスポートネットワークに関する。ネットワークの入口ノードにおいて、ネットワークは、本発明の第2の態様による第1のネットワーク要素を備える。ネットワークの出口ノードにおいて、ネットワークは、本発明の第3の態様による第2のネットワーク要素を備える。ネットワークは、さらなるネットワークノード、特に、入口ノードと出口ノードの間にスイッチングノードを備えることが可能であるが、そのような追加のネットワークノードは、義務的ではない。入口ノードにおけるネットワーク要素と、出口ノードにおけるネットワーク要素は、同一のカプセル化フォーマットを使用する。このカプセル化フォーマットは、企業標準において、または公開標準において標準化されることが可能である。トランスポートネットワークにおけるネットワークスイッチは、これらのスイッチが、コンテナフォーマット自体、例えば、イーサネット(登録商標)ジャンボフレームを知っている限り、特定のカプセル化フォーマットを必ずしも知らなくてもよい。
本発明の第1の態様、および本発明の好ましい実施形態による方法と関係する以上の所見は、本発明の第2の態様から第4の態様によるネットワーク要素およびネットワークにも当てはまる。
本発明は、添付の図面を参照して例として後段で説明される。
従来の高速コアネットワークを有する従来の階層ネットワークにおけるクライアントパケットフローを示す図である。 コアネットワークの負荷が重い場合におけるパケット集約を伴うパケットトランスポートネットワークを有する階層ネットワークにおけるクライアントパケットフローを示す図である。 図2のネットワークの負荷が低い場合におけるクライアントパケットフローを示す図である。 本発明の方法の第1の実施形態を示す図である。 本発明の方法の第2の実施形態を示す図である。
図1から図3は、前段で既に説明した。図4は、パケット集約を伴うパケットトランスポートネットワーク、例えば、バースト交換ネットワークを介してクライアント信号を伝送する本発明の方法の第1の実施形態を示す。この方法は、以下に説明されるとおり、標準のGFP(汎用フレーミングプロシージャ)の拡張によって実施される。
クライアントパケット30a、30b、30cが、例えば、様々な時刻t、t、およびtにネットワークの入口ノードに着信する。図4において、クライアントパケット30a、30b、30cは、異なるクライアント信号と関係する。クライアントパケット30a、30b、30cは、例えば、イーサネット(登録商標)フレームおよび/またはIP/PPPフレームであることが可能である。
クライアントパケット30a、30b、30cは、GFP符号化されたビットストリームに符号化され、すなわち、パケット30a、30b、30cは、GFPクライアントデータフレーム31a、31b、31cにマッピングされる。さらに、GFPアイドルフレーム32が、クライアントパケット30a、30b、30cの間のギャップを補償するようにGFPクライアントデータフレーム31a、31b、31cの間に配置される。
以下の2つのマッピングモード、すなわち、図4において使用されるフレームマッピングされたGFP(GFP−F)、およびトランスペアレントマッピングされたGFP(GFP−T)が、GFPに存在する。
GFP−Fにおいて、基本的にクライアントパケット全体が、GFPクライアントデータフレームの中にマッピングされるのに対して、GFP−T複数8B/10Bブロック符号化されたクライアントデータストリームは、GFPフレームにマッピングされる。GFP−Fは、通常、イーサネット(登録商標)クライアント信号またはIP/PPPクライアント信号のために使用されるのに対して、GFP−Tは、ファイバチャネルクライアント信号、ESCON(エンタープライズシステムズコネクション)クライアント信号、またはFICON(ファイバ接続)クライアント信号の場合に適用される。
各GFPクライアントデータフレーム31a、31b、31cは、コアヘッダフィールド(図示せず)を備え、コアヘッダフィールドは、GFPフィールド、特に、ペイロードの長さを記述する。さらに、各GFPクライアントデータフレーム31a、31b、31cは、ペイロード領域を備え、ペイロード領域は、ペイロードヘッダ31.1a、31.1b、31.1cと、ペイロード情報フィールド31.2a、31.2b、31.2cとを有する。クライアントパケット30a、30b、30cは、ペイロード情報フィールド31.2a、31.2b、31.2cにマッピングされる。
GFPクライアントデータフレーム31a、31b、31cの間のGFPアイドルフレーム32(特別なGFP制御フレームを形成する)は、コアヘッダフィールドを備えるが、ペイロード領域は全く備えず、それぞれ4バイトの長さを有する。
2つの後続のGFPクライアントデータフレーム31a、31b、31cの間のGFPアイドルフレーム32は、カウンタによってカウントされる。カウンタ値は、カウントされたGFPアイドルフレーム32によって形成されるそれぞれアイドル期間の直後のGFPクライアントデータフレームのGFPペイロードヘッダの予備フィールドの中に格納される。特に、このカウンタ値は、ペイロードヘッダの一部として拡張ヘッダの予備フィールドの中に格納されることが可能である。代替として、拡張ヘッダ識別子(EXI)フィールドは、さらなるタイプ定義を許すので、新たな拡張ヘッダタイプを定義してもよい。拡張ヘッダのサイズは、固定ではなく、タイプに応じて0バイトから58バイトまでの間で異なることが可能である。
GFPペイロードヘッダ31.1a、31.1b、31.1cの中に、このカウンタ値を格納する代わりに、このカウンタ値は、GFPコアヘッダの中に、または拡張されたGFPコアヘッダの中に格納されてもよい。
さらに、GFPアイドルフレームは、ビットストリームから除去される。脱落したアイドルフレームをカウントするステップと、それらのアイドルフレームを除去するステップはともに、ITU−T G.7041勧告において規定される従来のGFPの一部ではない。このため、この実施形態において、変形されたGFPが、実行される。
ペイロードヘッダフィールド31.1a、31.1b、31.1c(図4に示される、脱落したアイドルフレームの数を備える「ヘッダ」を参照)の中に脱落したGFPアイドルフレームの数を備えるGFPクライアントデータフレーム31a、31b、31cは、コンテナ33、例えば、バーストコンテナ33の中に次々に直接にマッピングされる。
ネットワークの様々なノードを介してコンテナ33を伝送する際、コンテナ33のペイロード、すなわち、パケット31a、31b、および31c、ならびにこれらのパケット31a、31b、および31cのヘッダは、ネットワークノードには不可視であり、その結果、コンテナ33のヘッダ(図示せず)だけが処理される必要があり、カプセル化されたパケットのヘッダは、処理される必要がないので、ヘッダ処理のための労力が減らされる。
ネットワークを介する伝送の後、プロセスは、出口ノードにおいて、すなわち、アンロード段階において逆転され、パケット着信プロセスは、ヘッダフィールド31.1a、31.1b、31.1cの中に格納された、訂正された出発距離を再確立することによって模倣される。正しい数のアイドルフレームが、ペイロードヘッダフィールド31.1a、31.1b、31.1cの中に格納された脱落したアイドルフレームの伝送されたカウンタ値に基づいて、さらにパケット自体が、さらなる伝送のためにコンテナから解放される前に、再現される。
正しい数のアイドルフレームが、受信されたGFPクライアントデータフレーム31a、31b、31cの間に挿入され、その結果、入口ノードにおけるタイミングが再構築される。最期に、クライアントパケット30a、30b、30cが、再構築されたタイミングでGFP符号化されたビットストリームから逆マッピングされる。アクセスネットワークを介する伝送のためのクライアントパケット30a、30b、30cの出発タイミングは、入口ノードにおけるクライアントパケット30a、30b、30cの着信タイミングに基本的に対応する。
前述したとおり、そのようなネットワークの入口ノードにおける可変のトラフィック負荷は、コンテナに割り当てられたパケットを蓄積することに関する可変の蓄積時間をさらにもたらす。蓄積時間の、この不確実性は、出口ノードにおける後続のコンテナの間で遅延の時間的ばらつきをもたらし、このため、集約解除の後のパケット着信のジッタをもたらす。トラフィック変動に起因する蓄積時間のそのような変化は、本発明の方法の第2の実施形態において後段で説明されるとおり、補償されることが可能である。その結果、同一のコンテナの中のパケットの相対的タイミングだけでなく、異なるコンテナの中のパケットの相対的タイミングも、出口ノードにおいて再構築される。
図5に示される本発明の方法の第2の実施形態は、以下のステップによって、コンテナの中にクライアントパケットを集約すること、および伝送されたコンテナからクライアントパケットを集約解除することを実行する。すなわち、
1.高速パケットトランスポートネットワークの入口ノードにおいて、様々なソースからの着信クライアントパケット40a−40eにタイムスタンプが押される。
2.着信クライアントパケット40a−40eが、出口ノードにおける第1のFIFOバッファ41の中にパケット40a−40eを格納することによって蓄積される。
3.(非常に低い負荷の場合)第1のFIFOバッファ41の中の第1のパケット40eに関してタイムアウト期間Tに達すると、または(通常の負荷、または重い負荷の場合)第1のFIFOバッファ41の充填が、最大コンテナフレームサイズに達すると、以下のステップが、実行される。すなわち、
3.1 第1のFIFOバッファ41のコンテンツ全体が、コンテナフレーム42(例えば、イーサネット(登録商標)ジャンボフレーム)の中に入れられ、FIFOバッファ41は、空にされる。
3.2 タイムスタンプによるタイミング情報、例えば、パケットの間、特に、後続のパケットの間の着信距離、または或るパケットの末尾と次のパケットの先頭の間の距離が、コンテナフレーム42の中に格納される。このことは、パケットの中に、このタイミング情報を格納することによって、例えば、図4に関連して説明されるとおり、パケットの変形されたヘッダの中に、このタイミング情報(この場合、省略されたアイドルフレームの数)を格納することによって、行われることが可能である。
3.3 第1のパケット40eのタイミング情報、例えば、第1のパケット40eの着信距離が、タイムアウト期間の経過していない部分に(すなわち、タイムアウト期間の残りに)設定される。タイムアウト期間の経過していない部分は、タイムアウトに達している場合、0である。
4.次に、コンテナフレーム42が、高速コアネットワークを介して伝送される。高速コアネットワークのスイッチングノードにおいて、コンテナ42のコンテンツ、特に、パケットのヘッダは、不可視である。
5.受信側出口ノードにおいて、コンテナ42のコンテンツが、第2のFIFOバッファ43の中に入れられる。タイムアウト期間の0の残り、または0でない残りを示すことが可能な第1のパケットを含め、パケット40a−40eが、格納された距離に応じて解放される。0の残りの場合、第1のパケット40eは、即時に解放され、その他のパケット40a−40dは、格納された距離で解放される。0でない残りの場合、第1のパケット40aは、タイムアウト期間の残りが経過した後に解放され、その他のパケット40a−40dは、格納された距離で解放される。
FIFOバッファ41の先頭が、タイムアウトに達した場合、デリバリは、タイムアウト制御される。第1のFIFOバッファ42の充填が、最大ジャンボフレームサイズに達した場合、デリバリは、フレームサイズ制御される。
しかし、両方のシナリオにおいて、各パケット40a−40eは、合わせて一定のタイムアウト期間Tにわたって第1のFIFOバッファ41と第2のFIFOバッファ43の中で待たなければならない。このことは、いくつかの例を参照して後段で説明される。
第1のパケットが、空の第1のFIFOバッファ41の中に時刻tに着信した場合、タイムアウト制御されるシナリオの事例において、第1のパケットは、時刻t=t+Tまで第1のFIFOバッファ41の中で待つ。第1のFIFOバッファ41の中の第1のパケットの待機時間は、□t(1)=Tである。この第1のパケットに関する相対的距離は、タイムアウト期間Tの残りに、すなわち、0に設定される。伝送の後、第1のパケットは、第2のFIFOバッファ43から即時に解放され、すなわち、第2のFIFOバッファ43の中の第1のパケットの待機時間は、□t(2)=0である。したがって、合計の待機時間は、□t=□t(1)+□t(2)=Tである。
第2のパケットが、時刻tに第1のパケットより後に着信した(第1のパケットは、時刻tに着信している)場合、第2のパケットは、第1のパケットがタイムアウトするまで、すなわち、t=t+Tまで第1のFIFOバッファ41の中で待つ。第1のFIFOバッファ41の中の第2のパケットの待機時間は、□t(1)=t−t=(t+T)−t=T−(t−t)である。受信側で、第1のパケットだけが、即時に解放される。後続の第2のパケットは、第1のパケットを基準とした着信距離t−tに従って、すなわち、□t(2)=t−tという待機時間の後、第2のFIFOバッファ43から解放される。このため、合計待機時間は、□t=□t(1)+□t(2)=T−(t−t)+(t−t)=Tであり、Tは、一定である。
同一の待機時間が、フレームサイズ制御されたシナリオの事例で生じる。タイムアウト期間が経過する前に、その後、完全に埋められる、空の第1のFIFOバッファ41の中に、時刻tに着信する第1のパケットを想定されたい。第1のFIFOバッファ41は、時刻tに一杯になり、t<t+Tである。この場合、第1のバッファ41における待機時間は、□t(1)=t−t<Tである。この第1のパケットに関する相対的距離は、タイムアウト期間Tの残りに、すなわち、T−□t(1)に設定される。受信側で、コンテナの受信の後、第1のパケットは、この場合、0ではない相対的距離□t(2)=T−□t(1)にわたって待たなければならない。このため、合計の待機時間は、この場合も、□t=□t(1)+□t(2)=□t(1)+(T−□t(1))=Tである。残りのパケットは、入口ノードにおけるタイミングに応じて、第1のパケットを基準にして解放され、つまり、残りのパケットの合計の待機時間もやはり、□t=□t(1)+□t(2)=Tである。
もちろん、すべてのパケットに関する合計の待機時間は、オプションとして、さらなる一定の遅延分だけ増加されてもよいことに留意されたい。例えば、タイムアウト制御されたデリバリの場合、第1のパケットは、即時に解放されるのではなく、さらなる一定の期間の後に解放される。
実際のパケットサイズ、密度、トラフィック負荷、またはコンテナ粒度にかかわらない、任意のパケットに関する一定の遅延は、光ファイバケーブル上のファイバ遅延と均等である。コンテナ交換コアの外部のネットワークアプリケーションは、両方の遅延寄与を区別することができない。
第2の実施形態に関するサイズ設定の例として、毎秒10ギガビットのイーサネット(登録商標)リンク、ならびに9.6キロバイトのサイズを有するイーサネット(登録商標)ジャンボフレームの中にクライアントパケットをカプセル化することを想定することができる。最大パケットレートは、リンク容量を最小パケットサイズで割った値として計算されることが可能である。ジャンボフレームの中にパケットを集約することなく、TCP ACKパケットの場合に64バイトの最小パケットサイズを想定すると、イーサネット(登録商標)リンクのラインカードにおける最大パケットレートは、毎秒10ギガバイト/(64バイト・8ビット/バイト)=19Mpps(1秒当たりのパケット数)である。ジャンボフレームの中にクライアントパケットを集約することで、最大パケットレートは、毎秒10ギガバイト/(9.6キロバイト8ビット/バイト)=130kpps、すなわち、リンク容量を、9.6キロバイトのジャンボフレームサイズで割った値として計算されることが可能である。このため、ジャンボフレームの中に集約することは、パケット処理が1/100未満に緩和されることになる。
タイムアウト期間TをT=1ミリ秒に設定する場合、そのようなタイムアウト期間は、200キロメートルのさらなるファイバ距離(ネットワークのスイッチングノード間ではなく、終端間)の遅延、または中間スイッチのうちの1つにおける1.25メガバイトのキューサイズにほぼ相当する。
最大ジャンボフレームサイズは、或る特定のパス上のトラフィック負荷が、ジャンボフレームサイズをタイムアウト期間Tで割った値、すなわち、(9.6キロバイト・8ビット/バイト)/1ミリ秒=毎秒77メガビットと少なくとも等しい場合に、タイムアウト期間T内に入口ノードにおいて達せられる。このトラフィックは、リンク容量の1/100未満である。このため、非常に低いトラフィックの場合にだけ、デリバリは、タイムアウト制御される。

Claims (13)

  1. パケットトランスポートネットワークを介してパケットを伝送する方法であって、
    ネットワークの入口ノード(3’)において、
    1つまたは複数のクライアント信号(2)のパケット(30a−c、40a−e)を受信して、蓄積するステップと、
    受信されたパケット(30a−c、40a−e)のタイミングを特徴付けるタイミング情報を決定するステップと、
    蓄積されたパケット(30a−c、40a−e)をコンテナ(20a−d、33、42)の中にマッピングするステップとを備え、
    ネットワークを介してコンテナ(20a−d、33、42)およびタイミング情報を伝送するステップと、
    ネットワークの出口ノード(7’)において、
    コンテナ(20a−d、33、42)を受信するステップと、
    コンテナ(20a−d、33、42)からパケット(30a−c、40a−e)を抽出し、パケット(30a−c、40a−e)を、タイミング情報に基づいて、さらなる伝送のためにタイミング制御するステップとを備え、
    それぞれのコンテナ(42)の中で伝送されるべきそれぞれの最も早く受信されたパケット(40e)が、基本的に一定の期間を同時に入口ノードと出口ノードにおいて待ち、入口ノードにおける期間の部分と、出口ノードにおける期間の部分との間の比が、入口ノードの負荷に依存する、方法。
  2. コンテナ(42)の中の伝送されるべき最も早く受信されたパケット(40e)に関して、入口ノードにおいて所定のタイムアウト期間に達したかどうかを監視するステップをさらに備える、請求項に記載の方法。
  3. 入口ノードにおける蓄積されたパケット(40a−e)が、コンテナ容量の所定の部分に達したかどうかを監視するステップをさらに備え、
    入口ノードにおいて、最も早いパケット(40e)に関して所定のタイムアウト期間に達すると、または蓄積されたパケット(40a−e)が、コンテナ容量の所定の部分に達すると、コンテナ(42)が、伝送の準備ができ、さらに
    出口ノードにおいて、最も早いパケット(40e)が、タイムアウト期間の経過していない部分に基づいてタイミング制御され、コンテナ(42)の中の残りのパケット(40a−d)が、タイミング情報に基づいてタイミング制御されて、互いに対するパケットの相対的タイミングが基本的に再現される、請求項に記載の方法。
  4. 入口ノードにおいて、第1のバッファ(41)の中にパケット(40a−e)を格納するステップと、
    出口ノードにおいて、第2のバッファ(43)の中に、受信されたコンテナ(42)のコンテンツを格納するステップとをさらに備え、
    第1のバッファ(41)の中のコンテナ(42)に関する最も早いパケットに関して、所定のタイムアウト期間に達したかどうかが監視され、さらに
    最も早いパケットに関して所定のタイムアウト期間が経過すると、コンテナに関する第1のバッファ(41)のコンテンツが、伝送の準備ができる、請求項に記載の方法。
  5. 第1のバッファ(41)が所定の充填サイズに達したかどうかを監視するステップをさらに備え、
    第1のバッファ(41)が、所定の充填サイズに達すると、第1のバッファ(41)のコンテンツが、伝送のために処理され、
    最も早いパケット(40e)が、タイムアウト期間の経過していない部分に基づいてタイミング制御されて、第2のバッファ(43)から解放され、さらにコンテナ(42)の残りのパケット(40a−d)が、タイミング情報に基づいてタイミング制御されて、第2のバッファ(43)から解放されて、互いに対するパケットの相対的タイミングが基本的に再現される、請求項に記載の方法。
  6. 最も早いパケットと関係する伝送されたタイミング情報が、タイムアウト期間の経過していない部分を示す、請求項に記載の方法。
  7. コンテナ(42)が、イーサネット(登録商標)ジャンボフレームである、請求項1に記載の方法。
  8. 決定するステップ、およびマッピングするステップが、
    変形された汎用フレーミングプロシージャ(GFPと称す)によって受信されたパケット(30a−c)を符号化するステップであって、GFP特有のアイドルフレーム(32)が脱落させられるステップと、
    脱落したアイドルフレーム(32)をカウントするステップとを備える、請求項1に記載の方法。
  9. 符号化するステップが、
    基本的にGFPに準拠して、GFP特有のアイドルフレーム(32)を有するデータストリームを生成するステップと、
    アイドルフレーム(32)を除去するステップとを備える、請求項に記載の方法。
  10. 決定するステップ、およびマッピングするステップが、脱落したアイドルフレーム(32)の数をGFPヘッダ(31.1a−c)の予備フィールドの中に格納するステップを備える、請求項に記載の方法。
  11. 脱落したアイドルフレーム(32)のそれぞれの数が、それぞれの脱落したアイドルフレーム(32)の直後のパケットのGFPヘッダ(31.1a−c)の中に格納される、請求項10に記載の方法。
  12. タイミング制御するステップが、脱落したアイドルフレーム(32)の数によって示されるとおり、アイドルフレーム(32)を挿入するステップを備える、請求項に記載の方法。
  13. パケットトランスポートネットワークの入口ノード(3’)における、第1のネットワーク要素であって、
    ネットワークを介して伝送されるべき1つまたは複数のクライアント信号(2)のパケット(30a−c、40a−e)を受信して、蓄積するための手段と、
    パケット(30a−c、40a−e)のタイミングを特徴付けるタイミング情報を決定するための決定手段と、
    蓄積されたパケット(30a−c、40a−e)をコンテナ(20a−d、33、42)の中にマッピングするためのマッピング手段と、
    ネットワークを介してコンテナ(20a−d、33、42)およびタイミング情報を伝送するための伝送手段を備える、第1のネットワーク要素と、
    パケットトランスポートネットワークの出口ノード(7’)における、第2のネットワーク要素であって、
    ネットワークの入口ノード(3’)において第1のネットワーク要素によって生成されたコンテナ(20a−d、33、42)を受信するための受信手段と、
    コンテナ(20a−d、33、42)からパケット(30a−c、40a−e)を抽出するための抽出手段と、
    タイミング情報に基づいて、さらなる伝送のためにパケット(30a−c、40a−e)をタイミング制御するためのタイミング手段を備える、第2のネットワーク要素を備え、
    それぞれのコンテナ(42)の中で伝送されるべきそれぞれの最も早く受信されたパケット(40e)が、基本的に一定の期間を同時に入口ノードと出口ノードにおいて待ち、入口ノードにおける期間の部分と、出口ノードにおける期間の部分との間の比が、入口ノードの負荷に依存するように構成された、パケットトランスポートネットワーク。
JP2010538597A 2007-12-17 2008-12-11 集約されたクライアントパケットのトランスポート Active JP5148716B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP07291541.6 2007-12-17
EP07291541A EP2073459A1 (en) 2007-12-17 2007-12-17 Transmission via a burst or frame switched network with timing preservation of the transmitted client packets
EP08155314A EP2079204B1 (en) 2007-12-17 2008-04-28 Transport of aggregated client packets
EP08155314.1 2008-04-28
PCT/EP2008/067322 WO2009077419A1 (en) 2007-12-17 2008-12-11 Transport of aggregated client packets

Publications (2)

Publication Number Publication Date
JP2011507430A JP2011507430A (ja) 2011-03-03
JP5148716B2 true JP5148716B2 (ja) 2013-02-20

Family

ID=39358357

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010538597A Active JP5148716B2 (ja) 2007-12-17 2008-12-11 集約されたクライアントパケットのトランスポート

Country Status (8)

Country Link
US (1) US7876785B2 (ja)
EP (2) EP2073459A1 (ja)
JP (1) JP5148716B2 (ja)
KR (1) KR101130098B1 (ja)
CN (1) CN101465805B (ja)
AT (1) ATE463909T1 (ja)
DE (1) DE602008000971D1 (ja)
WO (1) WO2009077419A1 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2099191A1 (en) * 2008-03-03 2009-09-09 Deutsche Thomson OHG Data transport container for transferring data in a high speed internet protocol network
US8509193B2 (en) * 2009-07-21 2013-08-13 Microsoft Corporation Packet aggregation
US8279891B2 (en) * 2009-12-15 2012-10-02 Cisco Technology, Inc. Techniques for ethernet optical reach improvement
WO2011134527A1 (en) * 2010-04-30 2011-11-03 Nokia Siemens Networks Oy Reducing overhead on voice traffic
JP5978792B2 (ja) * 2012-06-12 2016-08-24 富士通株式会社 伝送装置及び伝送方法
US9300429B2 (en) * 2012-07-26 2016-03-29 Telefonaktiebolaget L M Ericsson (Publ) Method and apparatus for transporting a client signal over an optical network
US9577955B2 (en) * 2013-03-12 2017-02-21 Forrest Lawrence Pierson Indefinitely expandable high-capacity data switch
KR101733609B1 (ko) 2014-02-07 2017-05-08 한국생명공학연구원 단백질 융합 디스플레이 기술을 이용한 물질 간 상호작용 고속분석 방법
ES2607496T3 (es) * 2014-02-25 2017-03-31 Alcatel Lucent Detección de fallos de GCC rápida
US10171430B2 (en) 2015-07-27 2019-01-01 Forrest L. Pierson Making a secure connection over insecure lines more secure
US11675587B2 (en) 2015-12-03 2023-06-13 Forrest L. Pierson Enhanced protection of processors from a buffer overflow attack
US10564969B2 (en) 2015-12-03 2020-02-18 Forrest L. Pierson Enhanced protection of processors from a buffer overflow attack
US20170171085A1 (en) * 2015-12-15 2017-06-15 Huawei Technologies Co., Ltd. Traffic Engineering System and Method for a Communications Network
CN105827353B (zh) * 2016-03-11 2018-02-16 烽火通信科技股份有限公司 一种基于wrr的otn串行化均衡调度实现方法及系统
CN107786320B (zh) 2016-08-25 2021-06-22 华为技术有限公司 一种发送和接收业务的方法、装置和网络系统
CN107786299B (zh) 2016-08-25 2021-06-08 华为技术有限公司 一种发送和接收业务的方法、装置和网络系统
GB201804479D0 (en) * 2018-03-21 2018-05-02 Nchain Holdings Ltd Computer-implemented system and method
US11295334B2 (en) * 2019-04-30 2022-04-05 Bank Of America Corporation Batch transaction multiplexing engine
CN112751645A (zh) * 2019-10-29 2021-05-04 华为技术有限公司 一种通信方法、设备及存储介质

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3241525A1 (de) * 1982-11-10 1984-05-10 Wabco Westinghouse Steuerungstechnik GmbH & Co, 3000 Hannover Einrichtung zum erfassen der position oder/und der geschwindigkeit des kolbens eines arbeitszylinders
US6813259B1 (en) * 1997-07-15 2004-11-02 Viasat, Inc. Method and apparatus for minimizing delay variance via time divided transmissions
JP2000332817A (ja) * 1999-05-18 2000-11-30 Fujitsu Ltd パケット処理装置
EP1069736B1 (en) * 1999-07-15 2012-09-05 TELEFONAKTIEBOLAGET LM ERICSSON (publ) Scheduling and admission control of packet data traffic
US6721315B1 (en) * 1999-09-30 2004-04-13 Alcatel Control architecture in optical burst-switched networks
US7391760B1 (en) * 2000-08-21 2008-06-24 Nortel Networks Limited Method and apparatus for efficient protocol-independent trunking of data signals
JP3778912B2 (ja) * 2001-06-28 2006-05-24 株式会社エヌ・ティ・ティ・ドコモ ルーチング方法、ノード、パケット通信システム、プログラム、及び記録媒体
CA2411991A1 (en) 2001-11-19 2003-05-19 Linear Systems Ltd. Transmitting digital video signals over an ip network
US7120168B2 (en) * 2001-11-20 2006-10-10 Sony Corporation System and method for effectively performing an audio/video synchronization procedure
US6801545B2 (en) * 2002-02-04 2004-10-05 Fujitsu Network Communications, Inc. Container transport for packets in connection oriented protocols
US6934776B2 (en) * 2002-07-16 2005-08-23 Intel Corporation Methods and apparatus for determination of packet sizes when transferring packets via a network
US7376141B2 (en) * 2002-12-17 2008-05-20 Raytheon Company Method and system for encapsulating variable-size packets
US7570643B2 (en) * 2003-02-12 2009-08-04 Cisco Technology, Inc. Efficient framing procedure for variable length packets
US7539209B2 (en) * 2003-03-05 2009-05-26 Ciena Corporation Method and device for preserving pacing information across a transport medium
US7187650B2 (en) * 2003-06-10 2007-03-06 Cisco Technology, Inc. Fibre channel frame-mode GFP with distributed delimiter
US7391769B2 (en) * 2003-06-27 2008-06-24 Lucent Technologies Inc. Packet aggregation for real time services on packet data networks
JP4059857B2 (ja) * 2004-03-02 2008-03-12 富士通株式会社 伝送装置及び伝送方法
US7463642B2 (en) * 2004-04-07 2008-12-09 Cisco Technology, Inc. Multiple receiver aggregation
JP2007533179A (ja) * 2004-04-09 2007-11-15 ユーティー シ ダ カン トン スン ヨウ シアン ゴン シ 無線周波数伸張基地局に基づく信号伝送方法およびシステム

Also Published As

Publication number Publication date
KR101130098B1 (ko) 2012-03-28
WO2009077419A1 (en) 2009-06-25
WO2009077419A8 (en) 2009-08-06
KR20100086055A (ko) 2010-07-29
ATE463909T1 (de) 2010-04-15
EP2073459A1 (en) 2009-06-24
US20090154475A1 (en) 2009-06-18
JP2011507430A (ja) 2011-03-03
DE602008000971D1 (de) 2010-05-20
US7876785B2 (en) 2011-01-25
CN101465805A (zh) 2009-06-24
EP2079204B1 (en) 2010-04-07
CN101465805B (zh) 2011-12-28
EP2079204A1 (en) 2009-07-15

Similar Documents

Publication Publication Date Title
JP5148716B2 (ja) 集約されたクライアントパケットのトランスポート
US8401010B2 (en) Multi-component compatible data architecture
US8532094B2 (en) Multi-network compatible data architecture
US7590139B2 (en) Method and apparatus for accommodating TDM traffic in an ethernet passive optical network
US7649843B2 (en) Methods and apparatus for controlling the flow of multiple signal sources over a single full duplex ethernet link
USRE40809E1 (en) Conversion of contiguous concatenation of virtual concatenation in a synchronous digital communication network
US6965619B2 (en) Flexible multiplexer/demultiplexer and method for transport of optical line data to a wide/metro area link
US7656910B2 (en) Add drop multiplexing method, apparatus and system based on GFP
EP1816803B1 (en) Transmission processing method for data frame and system thereof
US20060233194A1 (en) Ethernet encapsulation over optical transport network
EP1956763A1 (en) A method, a data network system and a network node for transmitting data packets
US6510166B2 (en) Stuffing filter mechanism for data transmission signals
Scholten et al. Data transport applications using GFP
US20070233894A1 (en) Shared buffer for near-end and optical interface flow control in fiber optic communications
CN108737911B (zh) 基于广义光突发交换的potn业务承载方法及系统
CN101635668A (zh) 以太网数据的传输控制方法及系统
JP2013123111A (ja) パケット多重伝送装置及び方法
JP2015207839A (ja) 通信システムおよび通信装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120511

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120703

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121002

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121030

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121128

R150 Certificate of patent or registration of utility model

Ref document number: 5148716

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151207

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250