Bir yapay zeka veri merkezinde, renk kodlu yapılandırılmış kablolama sistemini taşıyan, tavandan sarkan tel örgü kablo kanalları ile donatılmış bir dizi GPU sunucu rafı

İÇİNDEKİLER

Veri merkezi yapılandırılmış kablolama, planlı bir fiber ve bakır altyapısıdır: Sabit dağıtım alanları ile patch panelleri arasında kalıcı ana hatlar uzanır ve ekipmanlar bu panellere kısa patch kablolarıyla bağlanır. Alternatif ise, bazen yapılandırılmamış kablolama olarak da adlandırılan ve her bağlantı için ayrı bir kablo kullanılan noktadan noktaya kablolamadır. Bir AI kümesinde bu seçim her zamankinden daha önemlidir; çünkü tek bir GPU sunucusu sekiz veya daha fazla yüksek hızlı ağ bağlantı noktasına sahip olabilir ve her bağlantı noktası bir MPO konektöründeki birkaç fiber üzerinden çalışır.

Aşağıda, standart dağıtım alanlarını bir GPU veri merkezine eşliyoruz, kendi topolojinizden fiber sayısını nasıl tahmin edeceğinizi gösteriyoruz, her bir bağlantı panelinin kayıp bütçesinden ne kadar kullandığını hesaplıyoruz ve son olarak, ana hatları sipariş etmeden önce karar vermeniz gereken hususların bir listesini sunuyoruz.

Veri Merkezi Yapısal Kablolama Nedir?

Yapısal kablolama sistemi, odayı sabit işlevlere sahip alanlara böler. Omurga kablolama, dağıtım alanlarını birbirine bağlar; yatay kablolama ise bir dağıtım alanından ekipman raflarına uzanır ve her iki uçtaki bağlantı panelleri, her bir fiber kabloya sabit ve etiketlenmiş bir konum sağlar. Ekipman taşındığında veya bir bağlantı değiştiğinde, kullanıcılar kablo kanallarından yeni bir kablo çekmek yerine paneldeki bağlantıları yeniden düzenler; bu da değişikliklerin hızlı bir şekilde yapılmasını sağlar ve kesinti süresini sınırlar. Kablolama altyapısı, anahtarlar ve optik bileşenler bir nesilden diğerine geçerken de yerinde kalır; işte bu da sistemin ölçeklenebilirliğinin kaynağıdır.

Ekipman, kablolama ile iki yoldan biriyle birleşir. Bir ara bağlantı, aktif ekipmanın yanında bulunan ve bağlantı noktalarını odanın geri kalanına dağıtan bir bağlantı panosudur. Bir çapraz bağlantı ise, ekipman bağlantı noktalarını yansıtan ayrı bir panel grubu ekler; böylece herhangi bir bağlantı noktası, panellerin ön tarafındaki herhangi bir başka bağlantı noktasına bağlanabilir.[1]

Aşağıdaki dağıtım alanları, veri merkezi kablolamasına ilişkin endüstri standartlarından alınmıştır. Sağdaki sütun, standartta yer alan bir tanım değil, bir GPU veri salonu için uyguladığımız değerdir.

AlanKablolama düzenindeki rolüBir yapay zeka kümesinde tipik olarak bulunan içerikler (uygulamalı okuma)
Ana dağıtım bölgesi (MDA)Odanın ana çapraz bağlantısıOmurga anahtarları ve ana fiber çapraz bağlantı
Ara dağıtım bölgesi (IDA)Daha büyük tesislerde MDA ile HDA’lar arasında isteğe bağlı seviyeBir salon veya pod için bir çapraz bağlantı
Yatay dağıtım alanı (HDA)Bir bölgeye veya raf sırasına hizmet ederYaprak anahtarlar ya da bir sıra GPU rafına güç sağlayan paneller
Ekipman dağıtım alanı (EDA)Uç cihazlar için raflar ve dolaplarGPU sunucuları ve depolama düğümleri
Bir GPU veri salonunun kat planı: omurga anahtarlarına sahip MDA, her GPU sırasının sonunda bir HDA, sıralar içindeki EDA rafları, MDA’dan her bir HDA’ya uzanan omurga bağlantı hatları ve her bir HDA’dan GPU raflarına uzanan yatay bağlantı hatları

ABD standardının 2024 revizyonunda, MDA, IDA ve HDA’da en az 800 mm genişliğinde dolaplar için bir gereklilik eklenmiştir; ekipman çıkışında ise optik fiber için hâlâ yalnızca LC ve MPO konektörleri belirtilmektedir.[2]

Veri Merkezi Kablolama Standartları

BölgeStandartKapsam
Birleşik DevletlerANSI/TIA-942-C (Mayıs 2024)Veri merkezleri ve bilgisayar odaları için telekomünikasyon altyapısı[3]
UluslararasıISO/IEC 11801-5:2017Veri merkezleri için genel kablolama; ISO/IEC 24764:2010 standardının yerini almıştır[4]
AvrupaEN 50173-5:2018Veri merkezi alanları için genel kablolama sistemleri[5]
Lif bileşenleri (ABD)ANSI/TIA-568.3-E (Eylül 2022)Optik fiber kablolama ve bileşenleri[6]

Hâlâ birçok kablolama kılavuzunda ISO/IEC 24764, uluslararası veri merkezi standardı olarak belirtilmektedir. Bu standart yürürlükten kaldırılmış ve yerine ISO/IEC 11801-5:2017 getirilmiştir; bu nedenle günümüzde hazırlanan teknik şartnamelerde yeni standart numarası belirtilmelidir.[4]

Veri Merkezi Yapay Zeka İş Yüklerini Çalıştırdığında Neler Değişir?

Bir yapay zeka kümesi, herhangi bir modern veri merkeziyle aynı kablolama yapısını izler. Değişen unsurlar ise bağlantı sayısı, bağlantı başına fiber sayısı ve bağlantıların uzunluğudur. Her bir bağlantı noktasının bant genişliği, paralel olarak çalışan birkaç fibere bölünür; bu nedenle daha hızlı bağlantı noktaları genellikle daha fazla fibere ihtiyaç duyar.

  • Birden fazla ağ. NVIDIA’nın DGX SuperPOD referans mimarisi, bir hesaplama ağı, bir depolama ağı, bir bant içi yönetim ağı ve bir bant dışı yönetim ağını birbirinden ayırır.[7] Her biri farklı veri trafiğini taşır ve kendine özgü bir kablolama planına ihtiyaç duyar; hesaplama ağı ise açık ara en büyüğüdür.
  • Sunucu başına daha fazla bağlantı noktası. Bir DGX H100, sekiz adet tek bağlantı noktalı ConnectX-7 kartına hizmet veren dört adet OSFP yuvasına sahiptir; bu kartların her biri varsayılan olarak 400 Gb/s’ye kadar hızda InfiniBand çalışır.[8] SuperPOD tasarımında, sunucular her seferinde 32'şerli gruplar halinde bir araya getirilir ve her bir GPU hattı, diğer 31 düğümdeki aynı hattan bir atlama uzaklıktadır.[7] Bizim GPU ağ kılavuzu demiryolu şemasını açıklamaktadır.
  • Paralel optik. Bir 400GBASE-DR4 bağlantısı, 8 adet tek modlu fiber üzerinden kurulur.[9] 400GBASE-SR8, 16 adet çok modlu fiber kullanır[10] ve 800GBASE-DR8, 16 adet tek modlu fiber kullanır.[11] Bunların hepsi MPO konektörleriyle sonlanmaktadır; bu nedenle ana fiber sayısı, sadece bağlantı noktası sayısıyla değil, optik modüle de uymalıdır.
  • Kısa mesafeler. NVIDIA’nın DGX SuperPOD H100 veri merkezi tasarımında, herhangi bir InfiniBand kablosunun toplam kablo uzunluğu 50 m’yi aşmamalıdır.[12] Bu sınır, tek bir referans tasarıma ait olmakla birlikte, AI raflarının kablo uzunluğu dikkate alınarak ne kadar titizlikle planlandığını göstermektedir.
Dört ayrı ağa (hesaplama ağı, depolama ağı, bant içi yönetim ve bant dışı yönetim) bağlı tek bir GPU sunucusunun şeması; hesaplama ağı en fazla kablo kullanmaktadır

Bir GPU Kümesinde Yapısal Kablolama ve Noktadan Noktaya Bağlantıların Karşılaştırılması

Her iki yaklaşım da kümenin tamamı için zorunlu değildir. Bir kablolama üreticisi, tesisin tasarımına ve ölçeğine bağlı olarak hem arka uç hem de ön uç yapay zeka ağlarında noktadan noktaya veya yapılandırılmış kablolama mimarilerinin kullanılabileceğine dikkat çekmektedir.[13] Bir test ekipmanı üreticisi daha kesin bir tutum sergiliyor: Noktadan noktaya kablolama genellikle yalnızca tek bir rafın içinde kullanılır; örneğin, raf üstü anahtardan altındaki sunuculara doğru; dolaplar veya işlevsel alanlar arasında ise tavsiye edilmez.[1] Yaygın bir düzen, her ikisini de kullanır: rafların içindeki doğrudan bağlantılar ile raflar ve sıralar arasındaki yapılandırılmış kablolama.

BağlantıGenel yaklaşımNedenNeler izlenmeli?
Aynı rafta yer alan sunucuya geçişDoğrudan bağlantılı bakır kablolar (DAC) veya aktif optik kablolar (AOC)En kısa yol, panele gerek yokRaftaki kablo yığını ve hava akışı
Aynı sıradaki GPU rafı ile yaprak anahtarları arası bağlantıHer rafta bulunan bir panelden geçen MPO bağlantı kabloları veya doğrudan optik kablolarBu, sıranın ne sıklıkla yeniden kablolanacağına bağlıdırHer panel, bir çift eşleşmiş konektör ekler
Yapraktan sırta, sıradan sıraya, salondan salonaDağıtım alanlarındaki paneller arasındaki kablolarUzun süreli, kalıcı çalıştırmalar; değişiklikler panelden yapılırLif sayısı, polarite, kayıp bütçesi
Depolama ve yönetim ağlarıYapısal kablolamaDüzenli değişiklikler ve dönüşümler içeren uzun ömürlü bağlantılarEtiketler ve kayıtlar

AI bağlantılarında da patch paneller bir istisna değildir. Bir NVIDIA çift bağlantı noktalı tek modlu alıcı-vericinin 100 m’lik erişim mesafesi, bağlantıda iki adet optik patch panelin bulunduğunu varsayar.[14] Gecikme de bunları kullanmaktan kaçınmak için bir neden değildir: Bir pod içindeki kısa mesafelerde (50 m’nin altında), ışığın yayılma gecikmesi 250 nanosaniyenin altında kalır; bu da anahtarlama ve sinyal işleme gecikmelerinin yanında ihmal edilebilir düzeydedir.[15]

Bir çapraz bağlantının asıl maliyeti optik açıdan ortaya çıkar. Aktif ekipmanları birbirinden izole ederek ve yer değiştirme, ekleme ve değişiklik işlemlerini kolaylaştırmak karşılığında, kanala daha fazla bağlantı noktası ve dolayısıyla daha fazla ekleme kaybı getirir.[1] Sonraki bölümlerde bu maliyetin nasıl hesaplanacağı gösterilmektedir.

Bir AI kümesi kaç adet fiber gerektirir?

“Normal bir veri merkezinin on katı” gibi güvenilir bir genel kural yoktur. Fiber sayısı topolojiye bağlıdır; bu nedenle kendi tasarımınıza göre hesaplayın:

Lif sayısı formülü

Fiber sayısı = (sunucular × sunucu başına fabric bağlantı noktası sayısı × bağlantı noktası başına fiber sayısı) + (anahtarlar arası bağlantılar × bağlantı başına fiber sayısı) + depolama, bant içi ve bant dışı yönetim bağlantıları + büyüme için yedek kapasite.

Uygulamalı bir örnek: Bir DGX H100, sekiz adet 400G hesaplama bağlantı noktasına sahiptir.[8] Her bir bağlantı noktası sekiz aktif fiber içeren DR4 tipi bir optik modül kullanıyorsa, bir sunucunun 64 fibere ihtiyacı olur ve 32 sunucudan oluşan bir grubun sadece yaprak anahtarlara ulaşabilmesi için 2.048 fibere ihtiyacı olur. Bu optik modüllerdeki MPO-12 konektörü, dört adet gönderme ve dört adet alma fiberi kullanır ve dört pozisyonu boş bırakır.[16] SR8 veya DR8 gibi 16 fiber optik bir sistemde her bağlantı noktası için 16 fiber gerekir; bu nedenle, ana hat fiber sayısını ve konektör türünü birlikte belirleyin.[10][11]

Yayınlanmış referans tasarımlar, ikinci bir kontrol imkanı sunar. NVIDIA’nın GB300 NVL72 için kurumsal referans mimarisi, çift düzlemli hesaplama yapısı için aşağıdaki kablo sayılarını listelemektedir:[17]
GPU'lar Ölçeklenebilir birimler Compute-to-leaf kabloları Anahtar-anahtar arası kablolar
144 2 288 288
288 4 576 576
576 8 1,152 1,152
Bu hacimlerde, fabrikada sonlandırılmış ana kablolar yaygın bir tercihtir. Bir fiber üreticisi, maliyetleri düşürmek ve yapılandırılmış kablolama kurulumunu daha hızlı ve tutarlı hale getirmek amacıyla ana, yatay ve ekipman dağıtım alanlarında tamamen fabrikada sonlandırılmış kabloların kullanıldığını belirtmektedir.[18] Özellikle tek modlu uçlandırma işlemi, genellikle temiz bir üretim tesisinde, ısıyla sertleştirilen epoksi kullanılarak ve makineyle parlatma yoluyla gerçekleştirilir.[19] Bizim 400G ağ kılavuzu her bir 400G optik kablo için gerekli olan fiber sayısını listeler.

Her bir yama paneli, kayıp bütçesinin bir kısmını kullanır

Bir kanaldaki her bir bağlantı paneli, bir çift takılı konektör ekler. Her iki ucunda birer bağlantı bulunan bir kanalda iki bağlantı vardır; bir çapraz bağlantı eklendiğinde bu sayı üçe çıkar; her iki ucunda birer bağlantı ve aralarında bir çapraz bağlantı olduğunda ise bu sayı dörde çıkar.[1]

Paralel optik sistemlerde buna pek yer yoktur. Bir 400GBASE-DR4 kanalında 3,0 dB ekleme kaybına izin verilir ve maksimum menzili, bağlantı ve ek yerlerine 2,75 dB ayrıldığı varsayımıyla hesaplanır.[9] OM4 çok modlu fiber üzerinden bir 400GBASE-SR8 kanalı, toplamda yalnızca 1,9 dB kayba izin verir.[10] TIA-568 kablolama standartları, birbirine takılı her konektör çifti için maksimum kayıp değerini 0,75 dB olarak belirlemiştir.[20] İşte her bir çift o tavan seviyesindeyse ne olur:

KanalÇiftlerÇift başına 0,75 dB'lik bağlantı kaybıDR4’e karşı (2,75 dB ayrılmış)OM4 üzerinde SR8’e karşı (1,9 dB kanal)
İki bağlantı kablosu21,5 dBUygunFiber için 0,4 dB kalır
Bağlantı + çapraz bağlantı32,25 dBUygunAşıyor
İki ara bağlantı + çapraz bağlantı43,0 dBAşıyorAşıyor
Bir GPU sunucusu ile bir yaprak anahtar arasında, sırasıyla iki, üç ve dört eşleşmiş konektör çifti bulunan üç fiber kanal; bu kanallarda, 400GBASE-DR4 standardında belirlenen 2,75 dB değerine kıyasla, çift başına 0,75 dB olmak üzere 1,5, 2,25 ve 3,0 dB bağlantı kaybı gözlemlenmektedir.

0,75 dB değeri bir üst sınırdır, tipik bir değer değildir. Önemli olan nokta, panel sayısının optik açıdan bir bedeli olan bir tasarım kararı olduğudur. Eşleştirilen her çifti sayın, belirtilen kaybı bu üst sınırın oldukça altında olan konektörler kullanın ve her bağlantıyı kabul aşamasında ölçün. Uç yüzeylerini de tutarlı tutun: APC ve UPC konektörleri birbiriyle eşleştirilmemelidir. 400G ağ kılavuzu her bir 400G optik için bütçeyi belirtir.

MPO Kutupluğu: Sipariş Vermeden Önce Bir Yöntem Seçin

Polarite, her bir iletim fiberinin uzak uçtaki bir alım fiberine ulaşıp ulaşmayacağını belirler. Yöntem A, düz geçişli ana hatlar kullanır; Yöntem B, her iki ucunda da aynı tip bağlantı kablosu bulunan ters yönlü ana hatlar kullanır; Yöntem C ise bitişik çiftleri ters çevirir; bu nedenle paralel optik sistemler için tavsiye edilmez.[21] Tasarım aşamasında kanalın tamamı için tek bir yöntem seçin: önceden sonlandırılmış MPO montajları genellikle sipariş üzerine üretilir ve çoğu zaman iade edilemez.[21] Doğrudan optik-optik bağlantılar için NVIDIA, düz çapraz bağlantılı, B tipi MPO-12/APC kabloları sunmaktadır.[16] Bizim MPO konektör kılavuzu her yöntemi şemalarla açıklamaktadır ve şu konudaki kılavuzda MPO/MTP bağlantı kabloları nasıl belirlenir? bir siparişe polarite bilgisinin nasıl ekleneceğini gösterir.

Yollar, Yoğunluk ve Veri Merkezi Kablo Yönetimi

Veri merkezlerinde fiber kabloların yönetimi dört temel unsura dayanır: bükülme yarıçapını korumak, kablo güzergâhlarını açık tutmak, döşenen fiberlere erişilebilirlik sağlamak ve bunları kazara oluşabilecek hasarlardan korumak. Bu alanda yaygın olarak uygulanan bir kural, gergin durumdayken kablo çapının en az 20 katı, kurulumdan sonra ise gerginlik olmadığında 10 katı kadar bir bükülme yarıçapı sağlanmasıdır.[22]

GPU sıraları bu işlemlerin her birini zorlaştırır. Giriş delikleri, dikey kablo düzenleyiciler ve tavan kablo kanalları genellikle paneller dolmadan önce dolup taşar; bu nedenle, kablo yollarını ilk aşamaya göre değil, nihai fiber sayısına göre boyutlandırın. Birkaç adet yüksek kapasiteli modüler ana kablo, yüzlerce ayrı kablodan çok daha az yer kaplar ve rafın ön kısmını, gerçekten değiştirilen bağlantı kabloları için boş bırakır. Kablo fazlalıklarının nerede depolanacağını planlayın, bağlantı kablolarını kısa tutun ve her panelin arkasına ulaşmak için yer bırakın. Bu ana kabloları sonlandıran çerçeveler için, optik dağıtım panoları kılavuzu.

Her Bağlantıyı Etiketleyin, Test Edin ve Belgelendirin

Binlerce MPO bağlantısından oluşan bir kümenin bakımı, ancak her bağlantının bulunabilmesi ve her ölçümün daha sonra karşılaştırılabilmesi durumunda mümkün olur. Kayıtlar da güvenilirliği artırır: Doğru bağlantı noktasını hızlı bir şekilde bulabilen bir teknisyenin, yanlış olanı çıkarması olasılığı daha düşüktür.

Etiketleme

Kablolama etiketleme standardı olan TIA-606-C, kablo yolları, bağlantı panelleri, raflar ve dolaplar, bağlantı noktaları, kablolar, telekomünikasyon alanları ve veri merkezi oda şeması gibi öğeler üzerinde tanımlayıcıların bulunmasını gerektirmektedir.[23] AI kümeleri için, her bir ana kablo ve bağlantı kablosunun her iki ucunu da bağlantı noktası, fiber sayısı ve polarite bilgileriyle etiketleyin; etiketlerin fiber haritası ve kurulum şemasıyla tutarlı olmasını sağlayın. Kılavuzda MPO/MTP bağlantı kabloları nasıl belirlenir? siparişler için etiket metinlerini ve ambalajları kapsar.

Test ve Kabul

  1. Her bir uç yüzeyini inceleyin, gerekirse temizleyin ve tekrar inceleyin. Gözle inceleme, zayıflama ve geri dönüş kaybı ölçümlerinin yerini almaz.[24]
  2. Optik kayıp test seti kullanarak 1. Seviye testlerini gerçekleştirin: giriş kaybı, uzunluk ve polarite.[25]
  3. Kablo boyunca olayların yerini tespit etmeniz gereken yerlerde 2. Aşama (OTDR) testini ekleyin. Bu test, 1. Aşama ekleme kaybı ölçümünün yerini almaz.[25]
  4. Her bağlantıda ölçülen kayıpları, ileride sorun giderme işlemleri için bir referans noktası olarak kaydedin.
Beş adımlı fiber bağlantı kabul süreci: MPO uç yüzeyini inceleyin, gerekirse temizleyin, tekrar inceleyin, yerleştirme kaybı, uzunluk ve polarite için 1. Seviye testleri gerçekleştirin, ardından ölçülen kaybı referans değeri olarak kaydedin

Sipariş Vermeden Önce: Bir Planlama Kontrol Listesi

Kablo kanalları, paneller ve bağlantı kabloları için fiyat teklifi talep etmeden veya herhangi birinden ağ altyapısını kurmasını istemeden önce şu hususları netleştirin:

Karar verNeden önemli?
Bağlantı haritası: Her bağlantının başlangıç ve bitiş noktaları, ağ bazındaAna kablo güzergâhlarını ve uzunluklarını belirler
Her alanda ara bağlantı veya çapraz bağlantıKanal başına eşleştirilmiş çift sayısını belirler
Ana kablo fiber sayısı ve MPO türü (bağlantı noktası başına 8 veya 16 fiber)Optik sistemle uyumlu olmalı ve gelecekteki genişleme için yedek fiberler bulunmalıdır
Kanal başına zarar bütçesiPanel sayısının optikle uyumlu olup olmadığını kontrol eder
Tüm kanal için polarite yöntemiÖnceden sonlandırılmış parçalar sipariş üzerine üretilir
Uç yüzü (APC veya UPC)APC ve UPC birbirine takılamaz
Etiketleme sistemiEtiketler, elyaf haritasıyla eşleşmelidir
Test seviyesi ve kabul değerleriHer bağlantıda 1. seviye; gerekli yerlerde 2. seviye
Büyüme planıÖlçeklenebilirlik: Nihai fiber sayısına yönelik yol ve panel alanı

Bağlantılar devreye girmeden önce, kılavuzumuzdaki fiziksel katman kontrol listesini gözden geçirin 400G ağ kılavuzu.

YingFeng’den Yapay Zeka Veri Merkezleri için Fiber Bağlantı Çözümleri

Veri Merkezi Fiber Optik: MPO/MTP ana hatları ve bağlantı kabloları, yapılandırılmış kablolama için optik dağıtım çerçeveleri ve adaptörler. Veri merkezi ürünlerini görüntüle

YingFeng tedarik etmektedir veri merkezi fiber optikleri tesisin pasif tarafı için. Bizim MPO/MTP bağlantı kabloları 8, 12, 16 ve 24 fiberli versiyonları mevcuttur; düşük kayıplı versiyonlar da sunulmaktadır ve MPO/MTP montajları temiz odada üretilmektedir. Paneller için raf montajlı, duvara monte ve zemine yerleştirilebilir modeller üretiyoruz optik dağıtım panoları her müşterinin uygulama ortamına ve çizimlerine göre uyarlanır; panellerdeki fiber optik adaptörler ve çerçeve içindeki fiber dağıtım parçaları ise kendi tesislerimizde üretilmektedir. Talep üzerine numune temin edilebilir. Fiyat teklifi almak için, bize gönderin bağlantı şemanız, her bir ana hat başına fiber sayısı, MPO türü, polarite yöntemi ve uç yüzeyi.

Sıkça Sorulan Sorular

Veri merkezinde yapılandırılmış kablolama nedir?

Bu, bir veri merkezi içindeki kablolama tesisidir; sabit dağıtım alanları ile patch panelleri arasında kalıcı ana hatlar bulunur ve ekipmanlar kısa patch kabloları aracılığıyla bu hatlara bağlanır. Değişiklikler, yeni bir noktadan noktaya kablo çekmek yerine panelde yeniden bağlantı yapılarak gerçekleştirilir.

ABD’de ANSI/TIA-942-C (2024) standardı veri merkezi altyapısını, ANSI/TIA-568.3-E standardı ise fiber optik kablolama ve bileşenlerini kapsamaktadır. Uluslararası alanda, veri merkezlerindeki genel kablolama standardı olan ISO/IEC 11801-5:2017, ISO/IEC 24764 standardının yerini almıştır; Avrupa'da ise geçerli standart EN 50173-5:2018'dir. Etiketleme, TIA-606-C standardına göre yapılır.

Bir ara bağlantı, aktif ekipmanın yanında bulunan bir bağlantı panelidir. Çapraz bağlantı ise, ekipman bağlantı noktalarını yansıtan ayrı bir panel grubu ekler; böylece herhangi bir bağlantı noktası, başka herhangi bir bağlantı noktasına bağlanabilir. Çapraz bağlantı, değişiklikleri kolaylaştırır ancak her kanala eşleşen konektör çiftleri ve sinyal kaybı ekler.

Bir rafın içinde, doğrudan bağlanan bakır kablolar ve aktif optik kablolar yaygın olarak kullanılır. Raflar ve sıralar arasında, optik alıcı-vericiler tek modlu veya çok modlu fiber optik kablolar üzerinden bağlanır; 400G DR4 gibi paralel optik sistemlerde ise bağlantı noktası başına 8 veya 16 fiber içeren MPO konektörleri kullanılır.

Fabric bağlantı noktalarının sayısını, her bir optik modülün kullandığı fiber sayısıyla çarpın. DR4 tipi optik modüllere sahip sekiz adet 400G bağlantı noktası bulunan bir sunucu, depolama ve yönetim bağlantıları hariç, yalnızca hesaplama fabric’i için 64 fiber gerektirir. Bkz. Bir AI kümesi kaç adet fiber gerektirir? formülün tamamı için.

Dış kaynaklar

  1. Fluke Networks: Veri merkezindeki çapraz bağlantılar (Cabling Chronicles blogu)
  2. TIA Fiber Optik Teknoloji Konsorsiyumu: ANSI/TIA-942-C: Veri Merkezleri için Telekomünikasyon Altyapısı Standardı
  3. ANSI/TIA-942-C (07.05.2024), Veri Merkezleri için Telekomünikasyon Altyapısı Standardı: Accuris standartlar deposu
  4. ISO/IEC 11801-5:2017, Bilgi teknolojisi – Müşteri tesisleri için genel kablolama – Bölüm 5: Veri merkezleri: ISO
  5. BS EN 50173-5:2018, Bilgi teknolojisi. Genel kablolama sistemleri – Veri merkezi alanları (EN 50173-5:2018 ile aynıdır): BSI Bilgi
  6. ANSI/TIA-568.3-E (29 Eylül 2022), Optik Fiber Kablolama ve Bileşenleri Standardı: Accuris standartlar deposu
  7. NVIDIA: DGX H100 ve Ağ Yapılarını İçeren DGX SuperPOD Referans Mimarisi (ürün belgeleri)
  8. NVIDIA: DGX H100/H200 Kullanım Kılavuzu, Giriş (ürün belgeleri)
  9. TIA Fiber Optik Teknoloji Konsorsiyumu: 400GBASE-DR4 Uygulama Genel Bakışı
  10. TIA Fiber Optik Teknoloji Konsorsiyumu: 400GBASE-SR8 Uygulama Genel Bakışı
  11. TIA Fiber Optik Teknoloji Konsorsiyumu: 800GBASE-DR8 Uygulama Genel Bakışı
  12. NVIDIA: H100 için DGX SuperPOD Veri Merkezi Tasarımı, Planlama (ürün belgeleri)
  13. Siemon: Kesintisiz Veri Merkezi Bağlantısı Sayesinde Yapay Zeka Potansiyelini Ortaya Çıkarmak (bilgi makalesi)
  14. NVIDIA: MMS4X00-NS-T 800G Çift Bağlantı Noktalı OSFP – 2x400G Tek Mod Alıcı-Verici (ürün belgeleri)
  15. Veri Merkezi İttifakı: Yapay Zeka Destekli Veri Merkezlerinde Yapısal Kablolama
  16. NVIDIA: MMS4A20 800 Gbps DR4 Tek Bağlantı Noktalı OSFP Alıcı-Verici, Genel Bakış (ürün belgeleri)
  17. NVIDIA: GB300 NVL72 için Kurumsal Referans Mimarisi, Ağ Mantıksal Mimarisi (ürün belgeleri)
  18. Corning: MTP Bağlantısında Bir Sonraki Adımlar (bilgi makalesi)
  19. Fiber Optik Derneği: Fiber Optik için FOA Kılavuzu – Uçlandırma
  20. Fiber Optik Derneği: Fiber Optik için EIA/TIA 568
  21. Fluke Networks: 12 ve 8 fiberli MPO’larda doğru polarite ayarı (Cabling Chronicles blogu)
  22. Fiber Optik Derneği: Fiber Optik için FOA Kılavuzu – Fiber Optik Kurulumu
  23. Brady: Kablo Etiketleme Standartları: ANSI/TIA-606-C – Yenilikler Nelerdir? (bilgi makalesi)
  24. IEC 61300-3-35:2022, Fiber optik bağlantı cihazları ve pasif bileşenler – Bölüm 3-35: Fiber optik konektörlerin ve fiber uçlu alıcı-vericilerin görsel muayenesi: IEC İnternet Mağazası
  25. Fluke Networks: 1. ve 2. seviye fiber testleri için ipuçları (Cabling Chronicles blogu)