400G/800G への移行:パート II
これまで、400G 以降の移行に関する議論で、多くの分野を取り上げてきました。パートIでは、データセンターが最終的に高速機能を採用するよう促す市場と技術の推進要因について概説しました。より高速なASICを搭載したトランシーバー形式、変調方式、高半径スイッチの進歩について触れました。次に、オクタル・モジュールからポート・レベルへの追加の帯域幅を割り当てるためのコネクター・オプションがあります。コネクターには、従来のパラレルエイト、12、16、24ファイバーマルチプッシュオン(MPO)コネクターのほか、新しいデュプレックスLC、SN、MDC、CSコネクターがあります。
しかし、半分だけは物語の話です。400G 光モジュールとコネクターの開発は順調に進んでいますが、データセンターの管理者は、運用面と財務面の両方で理にかなうインフラストラクチャー配線戦略を定義するのに苦労しています。彼らはそれを間違える余裕はありません。物理レイヤー、つまりケーブル配線と接続性は、ネットワーク内のすべてをつなぎ合わせる接着剤です。構内配線インフラを設置した後は、交換にはリスクとコストがかかります。正しい判断を下すには、大部分において、急速に進化している規格に細心の注意を払う必要があります。
今日のハイリスクで動きの速いデータセンター環境で将来を見据えたインフラを開発することは、高速道路を駆け抜けながらタイヤを交換しようとするようなものです。計画、精度、そしてこれから起こることに関するちょっとした洞察が必要です。パート II では、成長のための十分な余裕を提供する標準ベースのインフラストラクチャを構築するために必要な情報と将来を見据えたビジョンを提供します。始めましょう
オフラインで読みますか?
後でお読みいただけるよう、この記事の PDF 版をダウンロードしてください。
最新情報を常に入手
エンタープライズソースを購読すると、新しい記事が投稿されたときに最新情報を受け取ることができます。
データセンターが必要とする追加の帯域幅を提供するために、ネットワーク設計者はネットワーク速度のスケールアップや、データ配信に使用するパス(レーン)の数のスケールアップが可能です。図 1 に、速度のスケールアップ (光学系) とレーン数 (スイッチ) のスケールアウトのオプションを示します。
ネットワーク速度が増加すると、コストと電力の観点から、速度のスケールアップが困難で高価になり、実装が遅くなる可能性があります。他のトレードオフもあります。では、どこにリソースを集中させるべきでしょうか?400Gと800Gのアプリケーションをサポートするには、データセンターのスケールアップとスケールアウトが必要になるため、これは難しい問題です。これを容易にするいくつかの重要な進展が起こっています。
2019 年以来、IEEE 802.3 タスクフォースは 100G レーンの IEEE P802.3ck 規格に取り組んでいます。 100G 2022つで標準を終えることを願っています。200G-per-lane標準規格については、2025時までに準備が完了することが予想されます。
図 2:現在のIEEE P802.3ckのタイムライン 2020年8月
多くのデータセンター管理者は、IEEE P802.3ck のタイムラインが業界をスケジュールより遅れさせると考えています。そのため、他の選択肢も検討されている。400G に到達するために、すでにひとつのオプション (より多くのレーンを配備 [スケールアウト]) が使用されています。800Gには100G電気規格が付属しており、初期の事前規格製品は2021つで出荷されます。1.6T に達するには、データセンターを 200G レーンにスケールアップするか、16 レーンにスケールアウトすることができます。最終的には1.6Tへの移行が終わりに近づいています。
次のスピードプラトーに到達しようとする際の基本的な課題は、ファイバーの量を増やすか、または多重化を使用してファイバーあたりの信号伝送波長の数を増やすかを決定することです。繰り返しますが、これは難しい質問です。
通常、400G, 800G以上のスループット速度の需要を満たすには、よりファイバー密度の高いネットワーク上に導入される波長分割多重(WDM)の組み合わせが必要です。波長の追加は、ファイバーの追加よりも簡単です。しかし、ファイバーが少なすぎると、WDM技術により多くの費用を払わざるを得ず、より安価な並列ソリューションがより良い選択肢となります。現在の技術ロードマップを考慮すると、16 芯ファイバー・インフラの人気が高まっています。
トレードオフ(物理ファイバーと仮想波長)はアプリケーションに基づいており、移行コストが大きな影響要因となります。資本コストと運用コストは、必要な物理ファイバーインフラストラクチャの実装コストと比較されます。電気速度は遅く、増加が困難であるため、より多くのレーン/ファイバー/波長が必要になる可能性があります。
興味深いことに、高速レーンへの移行にはコストに関連する特定の問題がありますが、図3に示すように、高速に移行するための相対的なコストは実際には減少する可能性があります。
図 3:Gbpsあたりのコストと光レーン速度の比較
WDMは、異なる波長の光を使用して、同じファイバー上に複数のデータパスを作成する一般的なデータセンターのアプローチです。人気の高いシングルモード WDM 技術は、CWDM(粗波長分割多重方式)と DWDM(高密度波長分割多重方式)です。CWDM は、より少ないチャネルとより短い到達距離のアプリケーション向けに最適化されており、低コストの WDM オプションとなっています。DWDMは、単一のファイバーで可能な限り多くの容量を達成するように最適化されているため、主に長距離ネットワークで高価で有用です。
イーサネット CWDM 技術の例としては、CLR4, CWDM4、FR4 などがあります。「4」が示すように、これらの技術は四つの波長を使用し、それぞれがデータチャネル(1270nm、1290nm、1310m、1330nm)を伝送する。これにより、データセンター事業者は、デュプレックス光ファイバー接続でより高いスループットをサポートできます。
WDMオプションはより多くの波長を提供できます(例えば、FR8は八つの波長を使用します)。追加機能には高価格の光モジュールが必要ですが、長距離アプリケーションはコストの増加を正当化する可能性があります。
容量不足に対処する上で、WDMがより大きな役割を果たすことが期待される主な分野は二つあります。一つ目は、データセンターに向かう相互接続です。5G、IoT、マシンツーマシン(M2M)学習などの現在および新しいアプリケーションにより、データセンターと外部ネットワーク間のより高速な接続の必要性が高まっています。WDMは、ファイバーあたりの容量を拡大し、既存のファイバー資産を使用しながら、容量と速度に対する需要の増加に対応するために使用されています。
WDM がより顕著な役割を果たすことが期待される第二の分野は、ネットワークスイッチ間の接続性の向上です。データセンターが従来の三層構造からメッシュタイプのリーフ&スパイン設計に移行するにつれ、サーバーポート密度が重要になります。高速ファイバースイッチ接続は、より多くのサーバートラフィックをサポートしながら、サーバー接続のポート数を節約します。 WDM は、ファイバーインフラを追加することなく、既存のデュプレックスファイバーネットワークの容量を増やし、時間とコストを節約する可能性があります。グリーンフィールド設置では、パラレルファイバーのオプションがさらにコスト効率を高めることができます。
マルチモード・ファイバーは、第三の WDM ベースの技術もサポートしています。短波長分割多重方式(SWDM)は、30nm間隔の短波長(850nm、880nm、910nm、940nm)を利用します。SWDMは、短距離アプリケーションでの容量と費用対効果が高いため、データセンターでは特に魅力的です。MMF 上で動作する SWDM は、双方向 (BiDi) 二重伝送経路で WDM の倍の速度を提供します。
この強化された機能により、データセンター管理者は、デュプレックスアーキテクチャの魅力的なアップグレードパスを利用でき、長距離にわたってより高速な速度を実現できます。パラレルファイバーを使用すると、マルチモードは 400G で 100m に達します。IEEE 802.3ck と 802.3db が完成に近づいており、この速度は 800G に増加するように設定されています。このパスはOM5 ワイドバンド MMF (WBMMF) ケーブルで最適化されており、マルチモードで WDM を強力にサポートします。
この機能の詳細については、OM5 ファイバーに関する記事をご覧ください。
図 4:イーサネットSMFオプティクスの年間ポート出荷数 2020
図 5:WBMMFは、
従来、コア・ネットワーク・ケーブルには、24、72、144、または288本のファイバーが含まれていました。これらのレベルでは、データ・センターはバックボーンとスイッチまたはサーバーの間で個別のファイバーを管理可能に実行し、ケーブル・アセンブリーを使用して分割し、効率的な設置を行うことができます。今日、ファイバーケーブルは、20倍ものファイバーストランドで展開され、ケーブルあたり最大6,912本のファイバーが使用されています。この増加は、主に、より高密度のファイバー・メッシュ・ファブリック・ネットワークへの切り替えによるものです。また、サーバーとスイッチ間のany-to-any接続性は、高密度および超高密度のパッチパネルの開発を推し進めています。パッチパネルには、より小さなフォームファクタのコネクターとモジュールが必要です。
では、ファイバー数の多いケーブルはどこに敷設されているのでしょうか?データセンターの相互接続(DCI)では、屋外施設ケーブル(ファイバー数も増加しています)がデータセンターに入ります。3,000 芯以上の光ファイバーによる DCI トランク・ケーブルは、ハイパースケール施設を接続するのに一般的であり、事業者は近い将来、その設計容量を倍増させる予定です。
コアスイッチとミートミールーム間のバックボーントランクケーブルをキャビネット列のスパインスイッチに接続する場合にも、よりカウント数の多いファイバーが使用されています。ファイバー数の増加は必要ですが、大きな課題が二つあります。まず 最も速く 効率的な方法で デプロイする方法ですこれは、それを物理的にスプールに置いたり、取り外したり、ポイント間や経路を通して実行したりします。設置後の次の課題は、スイッチとサーバーラックでそれを分解して管理することです。詳細:データセンターでの高いファイバー芯数に適応.
図 6:ファイバー数の多いケーブル配線の例
図 7:ロール式リボンファイバー
データセンターや大規模なエンタープライズネットワークにおける現在のトレンドは、水平方向のトラフィック(多くの場合、南北方向のトラフィックの10X)を最適化するファイバー密度の高いメッシュアーキテクチャに向かう傾向にあります。これは、依然としてスパインリーフ型ですが、ネットワークレイヤーが少なく、多くの場合、サーバー接続速度の向上が見込まれます。サーバーが接続されているエッジでは、接続が最も多くなります。サーバーはオーバーヘッドを表します。したがって、スイッチの数が少ないほど(そしてそのレイテンシーは低くなります)、良い結果をもたらします。
今日、ほとんどのスパインリーフネットワークには、いくつかのレイヤーまたは層があります。データセンターのサイズ(接続するサーバの数)によって、ネットワークスイッチング層の数が決まり、スイッチに接続するリーフスイッチの最大数も決まります。多くの場合、最下層がサーバーラック(ToR)の最上層に配置されます。この設計は、低速のサーバー接続が少ない従来の小型(低半径)スイッチに最適です。ToRスイッチは、ラック内のサーバー数とほぼ一致します。ラック内のすべてのリンクでは、サーバーとToRスイッチ間の短くて低コストな接続に、低コストの銅線接続ケーブル(DAC)がよく使用されます。
より高いラディックススイッチへの移行は、同じ32ポートスイッチを使用していたとしても、サーバーの接続に使用できるレーン数が倍(スイッチポートあたり八つ)であることを意味します。これは興味深い機会を提供します。より高いラディックススイッチを使用すると、複数のToRリーフスイッチが単一のティア1リーフスイッチに置き換えられる設計に移行できます。この単一のスイッチは、約四つのサーバキャビネットをサポートできるようになりました。構内配線により、少ない数のサーバーリーフスイッチをエンドオブロー(EoR)またはミドルオブロー(MoR)のいずれかで接続します。ToR スイッチを排除することで、ホップ数の削減、アプリケーションの待ち時間の短縮、安価で効率的な設計が可能になります。
図 8:より高いラディックススイッチにより、より効率的なEoR/MoR設計が可能
このアプリケーションに最適なソリューションには、ラディックスが光モジュールあたり八つの接続で維持されることが必要です。このオプションのコスト低減は、100 m の OM44 ケーブルで 2 Gb サーバー接続をサポートする新しい 400GSR8 アプリケーションを使用することで可能になります。 50 今後、802.3db 規格の開発では、同じ MMF インフラストラクチャでレーン速度を 100 Gb に倍増することを目標としています1。これは、高密度のAI/MLポッドに最適です。高密度のAI/MLポッドでは、サーバーネットワーク速度を大幅に向上する必要がありますが、より高価なSMオプティクスを必要とするような、より長いネットワークリンクは必要ありません。
OM4 が 2009 年に発売されたとき、OM3 は市場で好まれていたファイバータイプでしたが、新しい OM4 テクノロジーを採用する意欲を示した企業はほとんどありませんでした。イーサネット技術の進歩により、OM3 の到達距離が 70 メートルにまで減少し、OM4 の導入が始まったのは初めてでした。現在、OM4 が優先されるファイバー・タイプですが、イーサネット・テクノロジーが再び進化し、OM5 へと発展しています。
OM5 ファイバーには、OM3 と OM4 の二つの利点があります。まず、その減衰量(3 dB/km)はOM3およびOM4の減衰量(3.5 dB/km)よりも低くなっています。次に、OM3 と OM4 の有効モード帯域幅(EMB)仕様は 850 nm に制限されていますが、OM5 の EMB は 850 nm から 953 nm まで拡張されています。拡張された EMB ウィンドウにより、OM5 は単一のファイバーで複数の波長で複数のデータストリームを送信する SWDM に最適です。また、この機能により、OM5 は 400GBase-SR4.2 の主要なイネーブラーとなり、最大 150 m の拡張距離を可能にするため、400G 移行戦略の重要な部分となります。
OM5とその利点を活用するために使用されている光学系の詳細については、エンタープライズソースのMMFの章をご覧ください。
図 9:MMFクラスの進化
参考資料:MMF、ファクトファイル、コムスコープ、 2021
データセンターのさまざまなアプリケーションを補完するシングルモードとマルチモードのインフラ。アプリケーションの適切な組み合わせを見つけることで、光リンクのコストを最適化できます。しかし、各メディアのコストと能力が進んでいるため、正しく理解することは困難です。この決定を下す際に考慮すべき要素を見ていきましょう。
リンク距離
データセンターは一般的に、比較的短い距離で多数のネットワーク・リンクを必要とします。「短距離」とは、通常100m未満を意味します。これに対し、中距離は通常、ほとんどの大規模データセンターで500mと定義されています。キャンパスや非常に大規模なデータセンターなどで見られるような長距離の距離は、通常2km以上です。
シングルモードは、長距離機能と「無制限」の帯域幅を約束し、ハイパースケール・データ・センターで広く使用されています。具体的には、入口の施設でメトロ/ワイド・エリア・ネットワークからDCIリンクを終端するために使用されます。実際、長距離、高速オプションの多くはシングルモードでしか利用できません。
図 10:マルチモードとSMFの構造
参考資料:MMF、ファクトファイル、コムスコープ、 2021
リンクの量
データセンター内のリンクボリュームに関する議論は、まずユビキタスサーバー、つまりネットワークで最も多くの要素から始める必要があります。今日の構成では、サーバーは100G以上で接続されています。これらのアタッチメントのファイバー使用事例には、リンクの両端に実装する必要がある、低コストのマルチモード VCSEL ベースの光トランシーバーが含まれます。中規模のデータセンターでもサーバー数が膨大であることを考えると、必要な光ポートの数を合わせると、このアプリケーションはコストに非常に敏感です。
ただし、上位のネットワーク層に移行すると、スイッチのラディックスやその他のアーキテクチャ上の考慮事項に基づいて、ファイバーの数が急速に減少します。さらに、この距離は、マルチモードに課せられた100 mの短距離到達限界を超えることが多く、シングルモード技術が唯一の実行可能な選択肢となっています。
良いニュースは、プラガブル・シングルモード光トランシーバーの価格が下がり続けていることです。その結果、100G イーサネットがデータセンターのスイッチポート市場で大きなシェアを獲得しています。しかし、伝送タイプに関する議論は、プラガブルオプティクスのコストをはるかに超える必要があります。また、総チャネルコストの分析、データセンターの予想される成長、および移行ロードマップも含める必要があります。決断を下す前に、以下の点について検討してください。
ネットワークトポロジ: データセンターによっては、サーバーが100,000台以上ある場合もあれば、数台のみの場合もあります。ネットワーク機器の一元配置を使用するものもあれば、データセンター全体にネットワーク機器を分散させるものもあります。これらの設計要件と選択によって、ネットワーク・リンクの数とネットワーク・リンクがサポートする必要がある距離が決まります。
合計チャネルコスト: ファイバー・タイプ間のリンク・コストの比較では、トランシーバー、トランク、パッチ・コードなど、リンク全体のコストを評価します。異なるネットワーク・リンク・タイプの相対コストを比較するために、さまざまなコスト計算モデルが開発されています。たとえば、100G CWDM4 と 100G PSM4 のどちらかを選択する場合、平均リンク長が長いほど、デュプレックス・オプションが好まれる傾向があります。ただし、ブラウンフィールド設置では、PSM4 リンクをサポートするのに十分なファイバーがない場合があります。
その他の考慮事項: 設置とメンテナンスの違いにより、MMFの使用が有利になる場合があります。主な考慮事項には、以下が含まれます。
- ほこり/汚れに対する感度:ファイバー・コアが大きいほど、汚れの影響を受けにくくなります。これは、大容量サーバー接続において重要です。
- リンク速度:MMFは現在、波長あたり最大100Gの速度で動作しています。
- インフラのライフサイクルと安定性 - データセンターの容量を増やすには、どのくらいの期間を要しますか?
図 11:SR4, 2X23mコードに対する100Gリンク・コスト
データセンターの容量は、物理的な光ファイバーケーブル上に構築されます。光ファイバーケーブルは、できるだけ多くのデータ信号を保持することで、データ伝送の速度と効率を向上させるために、常に新しい光ファイバーに適応する必要があります。ファイバーの配線と接続は、一定量の信号(物理法則)を失いますが、パフォーマンスは向上し続けています。今日、超低損失(ULL)コンポーネントは、業界標準の制限を超えるように設計されており、終端処理済み配線システムを使用した高度な光アプリケーションをサポートしています。「超低損失」とはどういう意味ですか?
終端処理済みシステムは超低損失性能を備えているというのがよく言われます。しかし、ULL規格がないため、性能はどのように比較できるのでしょうか?言い換えれば、ULL のパフォーマンスにお金を払う場合、お金の価値を得られるかどうかを知るにはどうすればよいでしょうか?
数年前、イーサネットおよびファイバーチャネルアプリケーションの帯域幅の進化により、チャネル損失バジェットとチャネル長が大幅に削減されました。表 1 は、マルチモード・チャネルとシングルモード・チャネルの両方で、ケーブリング・チャネルの挿入損失(IL)要件がより厳しくなっていることを示しています。従来、終端処理済み MPO トランクと MPO/LC カセットの光学性能パラメータは、カセットの挿入損失(IL)とリターンロス(RL)(トランクコネクターを含む)で表されます。現在、市場で最高の性能を誇るシステムは、0,35 dBのIL性能を誇っています。
表 1:マルチモードおよびシングルモード・チャネルの挿入損失要件
これらの性能値は、国際規格で指定されたケーブル減衰を使用する100GBase-SR4アプリケーション用に設計された図12の構成に基づいています。
図 12:100GBase-SR4アプリケーションのチャネル構成の標準減衰量
上記の例は四つのカセット構成に基づいていますが、チャネルが四つ以上のカセットを必要とする場合はどうなるでしょうか?原則として、チャネル内のコネクターが多いほど、チャネルのリターン・ロスは低くなります。上記の場合、光トランシーバーが正常に機能するには、RLが12 dB以上である必要があります。ISO/IEC 11801-1 ed.3 で規定されている接続ごとの RL に基づいて、各接続の RL は 20 dB 以上である必要があります。終端処理済みシステムのすべてのカセットには、二つの接続(後部と前部)があります。図12のチャネル構成とISO/IEC 11801-1 ed.3のRL要件を使用すると、第三カセットの後に、チャネルのRLが20 dB RL閾値を下回ります。これは、図13に見ることができる。
これらの観察結果は、アプリケーションの機能を確保するために、光学性能の考慮事項にILとRLの両方を含める必要があることを示しています。コムスコープの SYSTIMAX® ULL ソリューションはさらに進化します。
- シックス カセット チャネルによる設計の柔軟性の最大化
- カセットが六つ未満の場合の拡張チャネル長
- 設計とテストをサポートするツール
- アプリケーション保証
図 13:X個のカセットの合計RL
SYSTIMAX ULL ソリューションは、優れた光学性能と、Il と RL の両方で真の超低損失性能を保証する統計的アプローチを組み合わせています。
コムスコープのファイバー性能計算機は、ケーブルチャンネルを設計し、最大リンク長を含むアプリケーションの機能を検証するために使用できます。
以下の構成は、一列に六つのカセットがあっても、チャネル長が標準のアプリケーション長を超えることを示しています(マークされたアプリケーションを参照)。
コムスコープは、サポートされる多くの光アプリケーションに対して保証を提供し、当社製品の性能を支えています。SYSTIMAX ファイバーパフォーマンス計算機の設計ツールとアプリケーションサポートガイドラインは、SYSTIMAX アプリケーション保証専用です。
コムスコープの 25-Year延長製品およびアプリケーション保証 (「システム保証」) の条件に基づき、SYSTIMAX システム仕様には、指定されたケーブルおよび光アプリケーションが SYSTIMAX パフォーマンス仕様に従って、そこに定められたパフォーマンス仕様を満たすことを保証するアプリケーション保証が含まれています。
システム保証および SYSTIMAX 仕様は、当社のシステム保証および SYSTIMAX アプリケーション保証の諸条件の詳細を提供します。現在公開されている 25-Year製品およびアプリケーション延長保証は、こちらでご覧いただけます。
最新の SYSTIMAX システム仕様およびアプリケーション保証は、SYSTIMAX アプリケーション保証でご覧いただけます。
その他のリソース
地域データセンター・クラスターの現在の傾向により、より大容量で低コストのDCIリンクの必要性が高まっています。新しい IEEE 規格 (以下の規格セクションを参照) は、ポイントツーポイント導入による低コストのプラグ・アンド・プレイ・オプションへの道を開きますが、コヒーレント検出と直接検出、変調方式、増え続けるファイバー数の管理方法について、データセンター事業者は難しい決断を迫られています。
この件については、今後の記事で詳しく説明します。
400G/800G以上を可能にする四つの柱を組み合わせる
データ・センター・インフラの四つの柱であるポート密度、トランシーバー、コネクター、ケーブル配線は、400G 以上のサポートに必要なコア・コンポーネントを見るための論理的な方法を提供します。各柱には、多数のオプションがあります。ネットワーク事業者にとっての課題は、個々の選択肢の長所と短所を理解すると同時に、四つの柱の相互関係を認識できることです。ケーブルの変更は、トランシーバー、ポート構成、およびコネクターの適切な選択に影響を与える可能性が高くなります。未来のネットワークを設計・管理する人は、ミクロとマクロの両方を同時に生きなければなりません。以下は、これが行われている場所の例です。
グリーンフィールド・プロジェクトでは、ネットワーク設計者と施設設計者は、1日目から400G, 800Gさらには1.6Tで現場に着くことができる高速インフラを構築する贅沢さ(そして課題)を持っています。では、具体的に何が必要なのでしょうか?以下は、より高速なインフラストラクチャを一から設計する際に考慮すべきトレンドとインサイトです。
ポート密度: リーフ/スパインスイッチアプリケーションの場合、市場ではスイッチ当たりのラディックス(ポート数)が最大であることが好まれます。最も効率的な設計を実現するために、ネットワークはスイッチ・ファブリック・ティアの数を最小限に抑えます(フラット化)。新しい ASIC はより多くの I/O をサポートしますが、速度が上がるにつれて、レーンレートとラディックスの間にトレードオフがあります。ただし、Radix は、特定のネットワークサイズでスイッチの数を減らす鍵となります。図14に示すように、典型的なハイパースケールデータセンターには約100,000台のサーバーがあり、このサイズのネットワークは、ネットワークスイッチの二層だけでサポートできます。これは、部分的には、より高度なラディックススイッチとより大容量のネットワークを可能にする、急速に進化するASICとモジュールによるものです。
図 14:ラディックスが高いほど、スイッチの数を減らすことができる
トランシーバー技術: パート I で説明したように、400G の主要なフォームファクターは QSFP-DD と OSFP です。どちらも、ワンラックユニット(1RU)スイッチで最大32ポートをサポートし、LC、MPO、SN(OSPF)、CSコネクターに対応します。主な違いは、QSFP-DD は QSFP+ および QSFP28 と下位互換性があるのに対し、OSFP は下位互換性のためにアダプタが必要です。800G向けに設計されたOSFPトランシーバーも、より長い保存期間を持つ可能性があります。各ASIC I/Oは、トランシーバを介して個々の光ポートにマッピングし、スイッチのラディックスを維持する必要があります。ケーブル配線インフラは、これらの光ポートをサーバーリンクにマッピングする必要もあります。
ケーブル配線とアーキテクチャ: ケーブル経路は、特にバックボーンネットワークとデータセンター相互接続において、非常に多くのファイバー数ケーブルに対応する必要があります。200 ミクロンやロール式リボン・ファイバーなど、設置面積を削減した新しいケーブル設計の利点を活用することで、ケーブル配線や曲げ半径の問題を最小限に抑えることができます。規模にかかわらず、グリーンフィールドデータセンターはクラウドアーキテクチャに備える必要があります。これには、「リーフ・スパイン」アーキテクチャを使用したサーバー間通信のダイレクト・パスの最適化が含まれます。この設計により、データセンター内の物理的な場所に関係なく、あらゆるコンピューティングおよびストレージデバイス上のアプリケーションを予測可能かつスケーラブルな方法で連携させることができます。ファブリックには冗長性が備わっており、複数のスイッチングリソースがデータセンター全体に分散されるため、アプリケーションの可用性が向上します。総ファブリック帯域幅は、エッジポートの数にエッジポートの速度を乗じるか、スパインポートの数にスパインポートの速度を乗じて計算できます。オーバーサブスクリプションがない場合、この二つの数字は同じになります。
既存の設備の多くは、八芯、12芯、または 24 芯のサブユニット MPO トランクを使用して、低損失または超低損失として設計されていました。ただし、400G および 800G アプリケーションは、トランシーバーに 16 本のファイバーを使用して最適化されます。16 ファイバーベースの設計により、グリーンフィールド・アプリケーションの移行とブレークアウトが簡素化されますが、八、12、または 24 ファイバー・サブユニット・トランクで構築された既存の設備は、より高速なオクタル・アプリケーションをサポートする可能性があります。
どの構成が最も理にかなっているかを判断する際に考慮すべき点は、次のとおりです。チャネル損失パフォーマンス、エンドポイント間のファイバー数、ファイバーの種類(SM、OM4, OM5)、極性、MPO トランクケーブルの長さ、性別。
IL および RL を含むチャネル性能は、SM および MM アプリケーションの要件を満たすために、携帯型テスト装置を使用してテストおよび文書化する必要があります。SYSTIMAX ファイバーパフォーマンス計算機などのコムスコープのアプリケーションを実行して、出発点としてチャネルパフォーマンスを検証することができます。
十二ファイバーサブユニットトランクケーブルは、1990年代から入手可能です。当時は、デュプレックス・アプリケーションに効果的でした。業界がMPOコネクターでデュプレックスからマルチペアアプリケーションに移行するにつれて、八、24、(最近では)16ファイバーサブユニットが追加されました。新しいオクタル・アプリケーションのサポートには、エンドポイント間のファイバー数を十分に確保する必要があるため、これらは歓迎すべき追加事項です。場合によっては、データセンターは既存のケーブルを活用して新しい需要を満たすことができます。拠点間のチャネル内のファイバー総数が移行を可能にすると仮定します。ロケーション間のファイバー数が16ファイバーまたは八ファイバーのグループと合致する場合、ブレイクアウトアレイケーブルを使用してネットワークポートへの移行を行うことができます。
一例として、フロントインターフェイスとしてLCデュプレックスポートを持つパネル間のトランクケーブルの144本のファイバーで構成される検証済みチャネルは、MPO16への八つのデュプレックスLCコネクタのアレイケーブルを使用してトランシーバーに終端できます(図15)。144 芯チャネルは、単一の RU でこれらのアレイケーブルの最大九本をサポートできます。これらのファイバーチャネルを管理する追加のアレイオプションも同様に接続を可能にします。同様に、16 芯ファイバーポートは、遠端の二重化サーバーポートにブレークアウトできます。
図 15:従来のチャネルで接続された 16 ファイバースイッチポート
例として、図 16 は、フロントインターフェイスとして LC デュプレックスポートを持つパネル間のトランクケーブルの 144 本のファイバーで構成される検証済みチャネルを示しています。
図 16:二重化サーバーポートに分割された 16 ファイバースイッチポート
また、2400G800G の展開では、50G または 100G の八つのレーンを 2 x 4 レーンのアプリケーションに分割する 4200G および 800G アプリケーションもあります。 100G 400G これらのアプリケーションでは、図 2 に示すように、従来の MPO8 トランクの接続で MPO16 から 17x MPO8 アレイ・アセンブリを利用できます。
図 17:2x MPO8-to-MPO16アレイ
変換アセンブリが既存のファイバーをフルに活用できるようにする別の方法は、トランクケーブルをインラインアダプターパックに終端することです。これは、既存のファイバーを利用するには効率的ですが、ケーブル管理の課題をもたらす可能性があります。正しく実装されていない場合、ブレークアウトの長さとポートの位置によって容量が無駄になる可能性があります。ポートがローカライズされ、ラックまたはキャビネット内に配置されていることを確認し、フル活用できるようにします。
ピン接続および非ピン接続に関する注意: MPO ベースのトランシーバーにはアライメントピンが内蔵されているため、接続機器またはパッチ・ケーブルは機器側で固定する必要があります。MPO変換ケーブルを使用する場合は、アダプターを使用してケーブルの反対側の端をトランクケーブルに接続します。トランクケーブル接続も同様にピン留めされている場合、変換ケーブルはピンなしからピンなしへの変換ケーブルでなければなりません。トランクケーブルがピン留めされていない場合は、機器ケーブルの嵌合端をピン留めする必要があります。ピン付きコードによる光学系の損傷を防ぐため、技術者は適切な端が両側に接続されていることを確認する必要があります。
極性について一言: 業界は、デュプレックスおよび多芯ファイバー接続のシンプルさを求めて方法 B の極性に移行していますが、データセンターでは他の従来の極性スキームがまだ導入されています。設置されたチャネルのパフォーマンスとファイバー数がアプリケーションのニーズを満たしていれば、カスタマイズされたトランジションケーブルを使用して高速トランシーバーに接続できます。
その他のリソース
802.3bs
IEEE は、400G アプリケーションを可能にするいくつかの新しい規格を導入しました。新しい変調方式PAM4の導入に関する重要な決定が下されました。PAM4により、電気レーンと光レーンは、従来のNRZ変調で実用的であった速度よりも高速に進歩できます。PAM4 は、25G から 50G のレーン・レートとレーン数を効率的に倍増します。その結果、400G 光トランシーバーが標準化されました。
802.3cm
MMF 上の 400G に対応するこの規格では、四対(400GBASE-SR4.2)と八対(400GBASE-SR8)のサポートが導入されました。どちらのアプリケーションもVCSELを使用しており、SMFの代替品と比較して低コストと電力設計を維持しながら、より高い帯域幅を提供し続けます。SR4.2とSR8はどちらも、大容量、高速サーバーリンク用に設計された100mの短距離MMFトランシーバーも使用しています。これは、速度が上がるにつれて銅ケーブルが短くなりなければならないため、注目に値します。同時に、より高いラディックス機能は、TORスイッチを排除することでネットワーク層を崩壊させるのに役立ちます。低コストのMMF光サーバー接続は、この設計をサポートし、コストを節約します。
802.3ck (ドラフト)
PAM4 の導入により、より高速な伝送をサポートするための次のステップは、電気信号と光信号のレーン・レートを 100G に引き上げることです。これは、保留中の 802.3ck 規格の焦点です。完成すれば、この規格は400Gアプリケーションのビット当たりのコストにプラスの影響を与え、800Gモジュールを可能にします(800G MACレートはIEEE Beyond 400G研究グループを通じて提案されています)。この基準は完成に近づいており、2022で完了する必要があります。
802.3cu
802.3cu は 100G および 400G モジュール(現在は 100G レーンに基づく)を導入し、DR、FR、LR、ER オプションを追加しす。用語オプションにレーン数が含まれるようになりました。400GBASE-FR4 は、2 km の到達距離 (F) を持つ二つのファイバーを使用して、四つの波長にわたって 100G のレーンを定義します。タスクフォースは10kmの到達距離(LR4の場合)と6kmの最大距離について合意できなかった。そのため、新しい名称(400GBASE-LR4-6)が作成されました。「6」は6 kmを表し、「L」は10 kmの到達距離を表します。
802.3cu 規格は 802.3ck 規格の前に完成しましたが、長期的には 100G の電気レーンが 100G の光レーンと一致することが見込まれています。これにより、25Gおよび50G規格に必要なギアボックスレートマッチングの必要性が軽減されます。共通の光インターフェイスは、将来的には100Gに融合し、ASICのいくつかの世代間での後方互換性を促進することが期待されています。
802.3db(案):
本稿執筆時点では、802.3db タスクフォースは 802.3cm の MMF の実装を増強する MMF 実装を引き続き追加しています。これらの新しい実装では、レーン数を 100G に増やし、100 m の OM4 で 400G と 800G のステージを設定します。MMFサーバー接続は、主な焦点です。これらの接続量が多いことを考えると、光学系のコストは重要です。Tier 1 (リーフ) リンクへの多くのサーバーは、列内にあり、非常に短いため、802.3db では 50m 未満のアプリケーションの最適化が試みられます。命名法に「VR」を追加することで 50m のリーチが特定され、SR では 100m のリーチが引き続き表示されます。予想されるアプリケーションには、ASIC I/O 容量に合わせて QSFP-DD 光トランシーバーが八レーンに残っている、八つのファイバーを使用する 400GBASE-SR4 が含まれます。したがって、2X400G SR4 には 16 芯の実装が使用されます。800G 容量も利用できます。しかし、現時点ではIEEE 800G MACがないため、この規格はまだ800GBASE-SR8に対応していません。
100G I/Oがスイッチポート速度を倍増させるため、同じ400G配線戦略と高帯域幅MMFが800Gモジュールへの移行をサポートできます。800G プラガブル MSA は、オクタル・モジュールと 100G 電気レーンの導入を活用して、800G 光アプリケーションの実装契約を開発しています。エンジニアは、2x400、4x200、8x100 などのブレークアウト・オプションのサポートを追加するために迅速に動いていますが、現時点では 800G MAC を必要とするアプリケーションは限られています。
IEEEは、より高いイーサネット速度の次の高原への移行を支援する研究グループを立ち上げました。800G は確かに普及しており、1.6T 以上のレベルへの道も模索されています。作業が始まると、多くの新しい目標が導入されます。この調査グループには、ネットワークエコシステムに必要な規格であると考える最大手のネットワーク事業者を含む、幅広い業界が参加しています。
これらの規格は、1.6Tに達するための新しいモジュール戦略の開発に使用される可能性が非常に高いです。Optical Internetworking Forum(OIF)は現在、3.2T Optic Engineに取り組んでいます。これは、スイッチングASICの隣に「コパッケージ」で収まるように最適化されたトランシーバの小型バージョンです。
業界のマルチソース契約(MSA)コンソーシアムは、新しいまたは斬新なネットワーク技術の開発と採用を加速するための継続的な取り組みに関与しています。800Gの実装を追加するなど、MSAの取り組みにより、業界標準の完成前に新しい技術が開発される場合があります。
800G プラガブル MSA
2019年9月では、800GプラガブルMSAが形成されました。IEEE の 100G VCSEL に関する作業はまだ進行中であるため、MSA は、一般的な 8x100G SR MMF オプションに代わる低コストのシングルモードの代替案に取り組みました。目標は、データ・センターが低コストのサーバー・アプリケーションをサポートできるようにする、早期の低コストの800G SR8ソリューションを提供することです。800Gプラガブルは、スイッチのラジックスの増加とラックあたりのサーバー数の減少をサポートします。
図 18:8x100、2x400 GbEモジュール
400G BiDi MSA
2018年7月 では、MMF を介した 100 m の双方向伝送で相互運用可能な 400G 光トランシーバーの採用を促進するために、400G 400G BiDi MSA が形成されました。 2019年9月では、MSAは100mのMMFで1.0400G-BD4400G2仕様のリリース2を発表しました。この仕様は、イーサネット・アプリケーションに 100G BiDi を活用し、広く普及している並列 MMF 配線インフラと互換性があります。400G-BD4.2 は、スイッチ間の近代的なデータ・センターにおけるクリティカルな大量リーチを含む、短距離アプリケーションに対応します。これらは重要な前進ですが、IEEE 802.3cm 規格を超える技術の進歩にはなりません。
図 19:400G MMF Bi-Di および SMF
100G Lambda MSA
2020年10月では、100G Lambda MSA Groupが、PAM4対応、波長あたり最大3kmの伝送をサポートする2つのギガビットイーサネット仕様を発表しました。 400 PAM4-enabled, 100G-per-wavelength 10 400G-LR4-10 規格は、最大 10 km のデュプレックス・シングルモード・リンクに対応しています。100G PAM4-modulated変調光信号の四つの波長を多重化することに依存しています。特に、さまざまなフォームファクターの光トランシーバーのマルチベンダー相互運用性を保証します。現在、100G Lambda MSAグループは、10kmを超える長距離仕様に対応しています。
図 20:シングルラムダ PAM4 QSFP
OSFP MSA
OSFP MSAは、高速ネットワーキングアプリケーション向けの次世代の前方互換性プラガブルモジュールフォームファクタの定義に重点を置くために、 2016年11月で作成されました。 2021年5月では、800G OSFPモジュールのOSFP 4.0仕様をリリースしました。OSFP モジュールは当初から 800G をサポートするように設計されていましたが、OSFP 4.0 仕様では、デュアル LC、デュアル Mini-LC、デュアル MPO、およびオクタル SN/MDC ファイバーコネクターオプションを備えたデュアル 400G およびオクタル 100G ブレークアウトモジュールのサポートが追加されています。
図 21:OSFP-LS モジュール
QSFP-DD MSA
2021年5月 では、QSFP-DD MSA グループが QSFP-DD/QSFP-DD800/QSFP116.0 ハードウェア仕様のリビジョン 2 をリリースしました。このリビジョンでは、QSFP-DD が更新され、QSFP-DD800 と QSFP112 が導入されています。その他の変更には、100G 電気的ホストインターフェイスのサポート、QSFP-DD800 および QSFP112 の機械的定義とボード定義の追加が含まれます。また、QSFP112 の電気的および管理タイミングも追加され、25 ワットのより高いモジュール電力定格をサポートします。
図 22:QSFP-DD トランシーバー
大規模なデータセンター事業者の多くは、ネットワーク効率の向上と同時に、極めて困難な導入スケジュールを設定することが急務であると考えています。権力の問題は、業界を悩ませ続けており、あらゆる決定に影響を与えています。エネルギー消費は、ネットワークがデータセンターアプリケーションに課す重い税金であり、将来のネットワーク速度を考慮すると、より重くなっていきます。リンク容量の増加は、効率を改善するために使用する重要なツールですが、もちろん、そのための技術は継続的に進化する必要があります。図23は、速度が速くなるにつれて予想されるコストと電力の改善を示しています。
図 23:速度を高速化すると、必要なリンク数が減り、データ・センター・ネットワークのビット当たりの電力が削減されます。
コパッケージドオプティクス(CPO)は、所要電力を数ピコジュールまで下げ、光IO速度を3.2Tまで上げる絶好のチャンスです。そこに到達するということは、困難な技術的課題を解決し、ネットワークサプライチェーンとその運用方法を再考することを意味します。すべてがうまくいけば、2025 つの時点では市販の CPO が見つかる可能性があります。そうでなければ、そのタイムラインは先送りになる可能性があります。
図 24:QSFP-XD 16 レーン、レーンあたり 100G
一方、CPO を必要とせずに、これらのネットワーク速度に合わせてプラガブルモジュールを進化させる道筋があります。ANDY Bechtolsheim が OFC '21 で発表したプレゼンテーションは、新しい OSFP-XD MSA の導入により、CPO とプラガブル間の競争の舞台となりました。800G OSFPモジュール仕様に基づいて、OSFP-XD MSAはレーン数を八から16に倍増します。これらのレーンは 100G で動作し、1.6T のモジュール容量を提供します。ASICからモジュールへの電気的な課題は、既知の技術で解決できるという考え方です。電力推定値は≈10 pJであり、1.6T世代の目標範囲内となる。市場投入までの時間が早くなり、CPO と比較してリスクも低くなります。
図 25:OSFP MSAは、次世代仕様「OSFP-XD」または16つの電気I/Oと期待される200G/レーン能力を備えた追加密度を導入しました。
図 26 に示すように、3.2T に到達するには、おそらく 200G の電気 / 光レーン (16 * 200G) が必要です。レーンレートが増加しない場合、並列ファイバーまたは波長の数は倍増する必要があり、これらのオプションはどちらも望ましくない(そしておそらく実現不可能)。
電気レーン速度を上げることは難しい作業であることを考慮してください。IEEE802.3ck タスクフォースは、 2019年5月 以来、この 100G 電気規格に取り組んでおり、現在は 2022 年後半に作業を完了する予定です。新しいIEEEプロジェクトは、200Gの電気信号を含む次のステップを踏みます。この作業は非常に困難であり、現在の見積もりでは、この技術は2025つで準備ができている可能性があります。
プラガブルモジュールや CPO など、初期パスに関係なく、200G 電気 I/O は必要なステップです。CPO の支持者は、アーキテクチャの利点を考えると、200G への道を自然な次のステップと考えています。しかし、モジュールアプローチを支持する人々は、OSFP-XDを200Gと互換性を持たせるために拡張できると考えています。彼らの見解では、シリコンの進歩により電力要件が削減されるため、ノード数の削減により全体的な目標を達成できます。
わかっているのは、データセンターがスイッチの帯域幅とネットワークファブリックの効率をうまく拡張するには、200G I/Oが不可欠であるということです。さらに、光レーンの高速化は、全体的なコスト削減と電力効率の向上の鍵となります。モジュールと CPO はどちらも 200G レーンへの潜在的なパスを提供します。どちらの道も困難で危険ですが、進むべき道を見つける必要があります。
200G 光レーン(シングルモード・ファイバーでも)では、2 km の伝送距離に基づく現在のトポロジーが危険にさらされる可能性があるほど、伝送距離能力が低下します。おそらく、これらの高速に近づくにつれて、他の技術がより魅力的になるだろう。コヒーレント・プラガブル・モジュールは、コスト効率と電力効率が向上しています。また、高速化が進むにつれて、DC/DCIアプリケーションにより多くのコヒーレント・モジュールが導入される可能性もあります。
図 26:容量の傾向 2014-2024
結論
確かに、400Gb以上の高速移行に関して考慮すべき点はたくさんあります。問題は、何を すべきかです。最初のステップとして、現在のネットワークに何があるかを振り返ってみましょう。現在どのように設計されていますか?例えば、ポイント間にパッチパネルやトランクケーブルがありますが、接続についてはどうでしょうか?トランクケーブルにピンはありますか?ピンの選択は、使用する予定のトランシーバーと一致していますか?ネットワークの移行を検討します。MPO-to-duplex、単一MPO-to-二つのMPOを使用していますか?ネットワークの現状に関する詳細な情報がなければ、将来のアプリケーションへの適応に何が必要かを知ることはできません。
将来のアプリケーションといえば、貴社のテクノロジーロードマップはどのようなものですか。進化する速度とレイテンシーの要件に対応するために、インフラストラクチャを準備するにはどの程度の滑走路が必要ですか?適切なファイバー数とアーキテクチャがありますか?
すでに検討しているかもしれませんが、他に誰が検討しているのでしょうか?ネットワークチームに所属している場合は、インフラストラクチャ側の担当者と対話する必要があります。設置されているものを把握し、将来的な要件や計画について警告することができます。
最後に、新鮮な視点と異なる視点を提供できる外部の専門家を招き入れるのに早すぎることはありません。お客様のニーズをあなたほどよく理解している人はいませんが、独立した専門家の方が、既存および新興のテクノロジー、設計トレンド、ベストプラクティスをよりよく把握している可能性があります。
エンタープライズ向けデータセンターソリューション
ソリューション
ハイパースケールおよびクラウド型データセンター
ソリューション
マルチテナント型データセンター
ソリューション
サービスプロバイダー向けデータセンター
見識
マルチモードファイバー:ファクト ファイル
リソース
高速移行ライブラリテスト 0
仕様情報
OSFP MSA
仕様情報
QSFP-DD MSA
仕様
QSFP-DD ハードウェア
見識
400G/800G への移行:ファクト ファイル - パート 1
一見すると、貴社のために競合するインフラストラクチャー・パートナーたちは、かなり多数出てきているようです。貴社にファイバーと接続を販売したいと考えているプロバイダーが数多くあります。しかし、貴社ネットワークを長期的に成功させるために何が重要かをよく見て考え始めると、その選択肢は狭まり始めます。ネットワークの進化を促進するには、ファイバーや接続性以上のものが必要だからです。これがコムスコープが必要とされる所以です。
パフォーマンスの向上:コムスコープの革新と性能の歴史は 40 年以上に及びます。当社のシングルモード TeraSPEED® ファイバーは最初の OS2 規格の 3 年前にデビューし、当社がパイオニアである広帯域マルチモードは、OM5 マルチモードを生み出しました。現在、当社のエンド・ツー・エンドのファイバーおよび銅ケーブルソリューションおよび AIM インテリジェンスは、お客様が必要な帯域幅、構成オプション、超低損失の性能により、最も要求の厳しい数々のアプリケーションをサポートし、自信を持って成長することができます。
機敏性と適応性: 当社のモジュール式ポートフォリオにより、ネットワーク内の需要の変化に迅速かつ簡単に対応できます。シングルモードおよびマルチモード、事前終端処理済みケーブル・アセンブリ、柔軟性の高いパッチパネル、モジュール式コンポーネント、8 芯、12 芯、16 芯、および 24 芯ファイバー MPO 接続、超小型フォームファクタのデュプレックスおよびパラレルの各種コネクタ。コムスコープは、あなたを高速でアジャイルに、そして日和見にします。
将来対応型 100G から 400G、そして 800G へと移行するにつれ、当社の高速移行プラットフォームは、より高いファイバー密度、高速レーン・レート、新しいトポロジーへの明確かつ優雅な道を提供します。ケーブルインフラストラクチャーを置き換えることなくネットワーク・ティアを縮小し、ニーズの変化に応じて高速で、低遅延のサーバー・ネットワークに移行します。1 つの堅牢で俊敏なプラットフォームが、あなたを今あるところから次なるところへと進化させます。
保証された信頼性:コムスコープは、アプリケーション保証により、お客様が現在設計しているリンクが今後何年にもわたってお客様のアプリケーション要件を満たすことを保証します。包括的なライフサイクル・サービス・プログラム(計画、設計、実装、運用)、フィールドアプリケーション・エンジニアたちのグローバルチーム、コムスコープの鉄のクラッドで覆われた 25 年保証により、この取り組みを支えています。
グローバルな可用性とローカルサポート:コムスコープのグローバルなフットプリントには、6 大陸にまたがった製造、流通、現地の技術サービスなどがあり、20,000 名の情熱的な専門家が参画しています。私たちは、いつでも、どこでも、必要なときに、お客様のためにお手伝いいたします。当社のグローバル・パートナー・ネットワークは、認定設計者、設置者、インテグレーターがネットワークを前進させ続けることを保証します。