جدول المحتويات
يمكن لكل من InfiniBand وEthernet نقل حركة مرور RDMA التي تربط خوادم GPU معًا في مجموعة خوادم الذكاء الاصطناعي، وكلاهما يُستخدم حاليًا لتشغيل أحمال عمل ضخمة في مجال الذكاء الاصطناعي. ويُعد InfiniBand بنية شبكية مخصصة لها محولاتها ونموذج إدارتها الخاص، في حين تنقل شبكة Ethernet حركة مرور RDMA عبر بروتوكول RoCE على محولات Ethernet، وقد اكتسبت زخمًا متزايدًا في شبكات الخلفية الخاصة بالذكاء الاصطناعي.
بالنسبة لمنشآت الألياف الضوئية، فإن الفرق بين تقنيتي InfiniBand وEthernet أقل مما يتوقعه العديد من المشترين. ففي الجيل 400G من NVIDIA، تعمل أجهزة الإرسال والاستقبال الأصلية مع أي من البروتوكولين، كما أن موصلات MPO-12/APC وكابلات الألياف الضوئية ولوحات التوصيل هي نفسها. لكن ليس كل رقم قطعة يدعم البروتوكولين. فيما يلي نقارن بين البنيتين، ثم ننتقل طبقةً طبقةً بدءًا من بطاقة الشبكة وصولاً إلى لوحة التوصيل لإظهار التغييرات التي تحدث عند التبديل والعناصر التي تظل كما هي.
إنفيني باند وإيثرنت (RoCE): ما هو كل منهما
إنفيني باند (InfiniBand) هي بنية شبكية مصممة للحوسبة عالية الأداء والذكاء الاصطناعي. ولديها محولات ومحولات شبكة وكابلات خاصة بها، وتقوم جمعية تجارية واحدة بوضع مواصفاتها. أما إيثرنت (Ethernet) فهي تقنية شبكية عامة الاستخدام موجودة في معظم مراكز البيانات. وبالنسبة لتدريب الذكاء الاصطناعي، فإنها تنقل نفس حركة مرور RDMA عبر RoCE، وهو اختصار لـ RDMA over Converged Ethernet. تتيح تقنية RDMA لخادم ما قراءة ذاكرة خادم آخر أو الكتابة فيها دون إشراك وحدة المعالجة المركزية (CPU) لذلك الخادم، مما يسرع نقل البيانات بين وحدات معالجة الرسومات (GPUs).
تقوم هيئتان مختلفتان بتعريفهما. حيث تعمل جمعية InfiniBand التجارية (IBTA) على تعريف مواصفات كل من InfiniBand وRoCE والحفاظ عليها. أما الطبقة المادية والتحكم في الوصول إلى الوسائط لشبكة إيثرنت السلكية، فيحددهما فريق العمل IEEE 802.3، الذي يضع معايير إيثرنت. وتعد RoCE وسيلة نقل قياسية في القطاع تتيح تشغيل الوصول المباشر عن بُعد إلى الذاكرة (RDMA) على شبكات إيثرنت العادية من الطبقتين 2 و3، وقد أصدرت IBTA أول مواصفاتها في عام 2010.
تتطور سرعات شبكة InfiniBand عبر أجيال متتالية. ووفقًا لخريطة طريق IBTA، فإن منتجات InfiniBand من نوع NDR بسرعة 400 جيجابت في الثانية متوفرة حاليًا في الأسواق، بينما من المقرر طرح منتجات GDR بسرعة 1.6 تيرابايت في الثانية في عام 2028.[1]
نقطة واحدة تتعلق بنطاق الدراسة: نحن نقارن الشبكة القابلة للتوسع الأفقي التي تربط الخوادم. أما NVLink فهي شبكة ربط قابلة للتوسع الرأسي مخصصة للاتصال بين وحدات معالجة الرسومات (GPU) داخل نظام على نطاق الرف، لذا فهي تُستخدم جنبًا إلى جنب مع InfiniBand أو إيثرنت بدلاً من أن تحل محل أي منهما. لدينا دليل شبكات وحدة معالجة الرسومات (GPU) يشرح كيفية ترابط طبقات التوسع الرأسي والتوسع الأفقي.
نظرة عامة على مقارنة بين InfiniBand و Ethernet
| إنفيني باند | شبكة إيثرنت مع تقنية RoCE | |
|---|---|---|
| يُعرَّف بـ | IBTA | معيار IEEE 802.3 لشبكة إيثرنت؛ IBTA لنقل RoCE |
| RDMA | أصلي | من خلال العائد على رأس المال المستثمر (RoCE) |
| فقدان الحزم | مصمم لشبكات الإدخال/الإخراج الخالية من الفقدان | يعتمد الأداء الخالي من الفقدان على إعدادات التحكم في التدفق والازدحام عبر البنية |
| إدارة الأقمشة | يتولى مدير الشبكة الفرعية مهمة التوجيه | أدوات التبديل والتشغيل القياسية لشبكة إيثرنت |
| المفاتيح | محولات NVIDIA Quantum InfiniBand | العديد من الشركات الموردة؛ في عام 2024، تصدرت شركات «سيليستيكا» و«إنفيديا» و«هواوي» سوق محولات إيثرنت للخدمات الخلفية في مجال الذكاء الاصطناعي |
| المقياس المنشور | عشرات الآلاف من العقد في شبكة فرعية واحدة (IBTA) | تصميمات مجموعات RoCE تستوعب ما يصل إلى 32,000 وحدة معالجة رسومات (Meta) |
| بطاقات الشبكة | يعمل ConnectX-7 بأي من البروتوكولين | يعمل ConnectX-7 بأي من البروتوكولين |
| البصريات والألياف الضوئية | MPO-12/APC، أحادي النمط أو متعدد الأنماط | نفس الموصلات والألياف في الجيل 400G |
الزمن المستغرق والأداء: لماذا تختلف الأرقام؟
غالبًا ما يُختار «إنفيني باند» (InfiniBand) لكونه يتميز بزمن انتقال منخفض، لكن الادعاءات التي تفيد بأن إحدى الشبكات تتمتع بزمن انتقال أقل من الأخرى نادرًا ما تُقارن على أساس متماثل. فبعضها يمثل اتصالاً من منفذ إلى منفذ عبر محول واحد، وبعضها يمثل اتصالاً من طرف إلى طرف بين المضيفات، وقليل منها يذكر ما إذا كانت الشبكة محملة أم مزدحمة. تشير جمعية IBTA إلى زمن انتقال منخفض للغاية لشبكة InfiniBand، حيث تم قياس زمن انتقال يبلغ 600 نانوثانية من طرف إلى طرف،[1] ولكنه لا يحدد شروط الاختبار، كما أن نتائج شبكة إيثرنت تعتمد على المحول، وبطاقة الشبكة، والتكوين، ونمط حركة المرور.
بالنسبة لتدريب الذكاء الاصطناعي، لا يُفيد رقم واحد للزمن الاستجابة كثيرًا. فعمليات التدريب تقوم بمزامنة وحدات معالجة الرسومات (GPUs) مرارًا وتكرارًا، لذا تنتظر العملية بأكملها أبطأ عملية نقل، ويمكن أن يصبح رابط واحد مزدحم هو عنق الزجاجة. ويُعد معدل النقل تحت الحمل مهمًا بقدر أهمية الزمن الاستجابة. في شبكة RoCE التابعة لشركة Meta، أدت التدفقات التي اصطدمت بعد فشل أحد الوصلات إلى إبطاء مهمة التدريب بأكملها، وكان الهدف المعلن لعملها في مجال الازدحام هو تحقيق زمن انتقال ذيل يمكن التنبؤ به. المقارنة العادلة هي وقت إتمام المهمة على البنية الخاصة بك، مع حمل العمل الخاص بك. لدينا دليل شبكات وحدة معالجة الرسومات (GPU) يتناول الأسباب الشائعة لبطء حركة المرور أثناء التدريب.
إيثرنت مقابل إنفينيباند: أيهما يناسب مجموعة حوسبة الذكاء الاصطناعي الخاصة بك؟
يخدم كلا النوعين من البنى نفس حالات الاستخدام، وهي التدريب على الذكاء الاصطناعي على نطاق واسع والحوسبة عالية الأداء (HPC)، لذا فإن القرار بين إيثرنت وإنفيني باند لا يرجح كفة أي منهما في جميع الحالات. وتنشر شركة NVIDIA نفسها تصميمات مرجعية لكليهما. فبنية DGX SuperPOD H100 الخاصة بها تستخدم InfiniBand كبنية حوسبة، كما تستخدم بنية شبكة InfiniBand للتخزين أيضًا، في حين أن البنية المرجعية المؤسسية الخاصة بها لنظام GB300 NVL72 تستخدم شبكة إيثرنت Spectrum-X كبنية حوسبة.
| إذا كان هذا ينطبق على مشروعك | وهو يشير إلى | لماذا |
|---|---|---|
| أنت تقوم بنشر تصميم مرجعي خاص بأحد الموردين كما تم نشره | أياً كان ما ينص عليه ذلك التصميم | يتم التحقق من صحة المحولات والكابلات وأطوالها معًا |
| يستخدم فريقكم بالفعل شبكة إيثرنت على نطاق واسع ويشتري معداتها من عدة موردين | شبكة إيثرنت مع تقنية RoCE | نفس الأدوات والمهارات وسلسلة التوريد المتبعة في بقية الشبكة |
| أنت تريد نسيجًا مصممًا منذ البداية لتقنية RDMA بدون فقدان البيانات | إنفيني باند | تقليل الحاجة إلى ضبط إعدادات التحكم في التدفق وإدارة الازدحام |
| ستتشارك المجموعة في عمليات التبديل مع حركة مرور الواجهة الأمامية أو حركة مرور التخزين | شبكة إيثرنت مع تقنية RoCE | تقنية تبديل واحدة عبر الشبكات |
| عدة آلاف من وحدات معالجة الرسومات (GPU) أو أكثر | أو | وقد أظهر كلاهما قابلية التوسع في عمليات النشر أو التصاميم المنشورة |
يتجه السوق نحو شبكات إيثرنت. أفادت مجموعة «ديل أورو» في يوليو 2025 أن شبكة «إنفينيباند» كانت تستحوذ على أكثر من 80 في المائة من شبكات الخلفية الخاصة بالذكاء الاصطناعي عند بدء تغطيتها في أواخر عام 2023، وأن شبكات إيثرنت أصبحت الآن هي السائدة في هذا القطاع.[3] هذه توقعات سوقية، وليست قرارًا بشأن أي مجموعة بعينها. ولا يزال كلا خطي الإنتاج يُباعان ويحظيان بالدعم.
هل يعني تغيير شبكات التبديل الحاجة إلى كابلات ألياف ضوئية جديدة؟
في الغالب لا، طالما بقيت ضمن نفس جيل السرعة والواجهة الضوئية. يعمل البروتوكول في المحولات، وفي بعض الأجزاء، في البرامج الثابتة لجهاز الإرسال والاستقبال. أما الموصلات والألياف ولوحات التوصيل فهي عناصر سلبية: فهي تتولى نقل البيانات دون معرفة البروتوكول الذي تنقله. كما أن عرض النطاق الترددي للمنفذ هو نفسه على كلا الجانبين في هذا الجيل، حيث يبلغ 400 جيجابت في الثانية لكل منفذ. وفيما يلي صورة توضح طبقات جيل 400G (100G-PAM4) من NVIDIA:
| الطبقة | هل طرأت تغييرات على البروتوكول؟ | ما ورد في وثائق المورد |
|---|---|---|
| المفاتيح | نعم | تعد شبكات NVIDIA Quantum-2 NDR InfiniBand وSpectrum-4 SN5600 Ethernet خطوطًا منفصلة من المحولات، لكن كلاهما يستخدم حوامل OSFP ثنائية المنافذ تحتوي على منفذين بسرعة 400 جيجابت في الثانية |
| بطاقات الشبكة | عادةً لا | تدعم بطاقة ConnectX-7 كلا البروتوكولين في نفس البطاقة، ويتم تفعيلهما بواسطة محول InfiniBand أو إيثرنت الذي تتصل به؛ في حين أن بعض محولات ConnectX-6 وBlueField-2 مخصصة لبروتوكول معين |
| أجهزة الإرسال والاستقبال | تحقق من رقم القطعة | تدعم أجهزة الإرسال والاستقبال NDR/400GbE الأصلية كلا البروتوكولين، وتقوم برامجها الثابتة بتفعيل بروتوكول المحول؛ أما الإصدارات الأحدث المخصصة لشبكة إيثرنت فقط فتنتهي بـ “-T”[4] |
| الموصلات | لا يوجد | MPO-12/APC: ثمانية ألياف قيد الاستخدام، وأربعة مواضع شاغرة |
| الكابلات الليفية | لا يوجد | تشير شركة NVIDIA إلى أن الكابلات الليفية نفسها تُستخدم في كل من تقنية NDR وأحدث أنظمة البصريات الخاصة بها |
| لوحات التوصيل والكابلات الرئيسية | لا يوجد | تفترض أرقام المدى الخاصة بهذه العناصر البصرية وجود لوحتي توصيل بصريتين في الوصلة |
| كابلات DAC و AOC | تحقق من رقم القطعة | تأكد من أن كل جزء من الكابل مدرج ضمن قائمة الكابلات المخصصة للمحول والسرعة المستهدفة؛ حيث تحتاج بعض المحولات القديمة إلى كابلات مخصصة لبروتوكولات معينة |
يتم تعيين الواجهة الضوئية بواسطة جهاز الإرسال والاستقبال، وليس بواسطة البروتوكول. وتُظهر هذه المكونات الضوئية من الجيل 400G من NVIDIA هذا النمط:
| جزء | شكل الجهاز | الموصل | الألياف | الوصول |
|---|---|---|---|---|
| MMS4X00-NS | OSFP ثنائي المنافذ (2 × 400G) | 2 × MPO-12/APC | أحادي النمط، 1310 نانومتر | ما يصل إلى 100 متر |
| MMS4X00-NM | OSFP ثنائي المنافذ (2 × 400G) | 2 × MPO | أحادي النمط، 1310 نانومتر | ما يصل إلى 500 متر |
| MMA4Z00-NS | OSFP ثنائي المنافذ (2 × 400G) | 2 × MPO-12/APC | متعدد الأوضاع، 850 نانومتر | ما يصل إلى 50 مترًا |
| MMA1Z00-NS400 | QSFP112 (400G) | MPO-12/APC | متعدد الأوضاع، 850 نانومتر | ما يصل إلى 50 مترًا |
ما الذي يُحتفظ به وما الذي لا يُحتفظ به
خلال جيل واحد وواجهة بصرية واحدة، يمكن أن تظل البنية التحتية للألياف الضوئية (خطوط MPO-12/APC، ولوحات التوصيل، وكابلات التوصيل) في مكانها. أما المحولات فهي التي تتغير. أما أجهزة الإرسال والاستقبال وكابلات DAC وAOC، فيجب التحقق من أرقام قطع الغيار الخاصة بها، كما يجب مراجعة أطوال الكابلات وفقًا للتصميم المرجعي الجديد. فعلى سبيل المثال، يحدد تصميم DGX SuperPOD H100 من NVIDIA مسار أي كابل InfiniBand بحد أقصى يبلغ 50 مترًا.
ما يؤثر فعليًّا على الألياف هو تغيير الواجهة البصرية. فكل من الوصلة أحادية النمط من النوع DR4 والوصلة متعددة النمط من النوع SR4 تستخدمان واجهة MPO-12/APC، لكن لا يمكن استبدال الألياف أحادية النمط بالألياف متعددة النمط. لدينا دليل شبكة 400G توضح القائمة الألياف التي تحتاجها كل كابل بصري من نوع 400G، و كابلات التوصيل MPO/MTP تغطي كلا النوعين من الألياف.
الترحيل أو تشغيل كلا النظامين: قائمة مراجعة لأعمال التوصيلات الكبلية
- تحقق من رقم كل قطعة من قطع جهاز الإرسال والاستقبال. تأكد من أنه يدعم البروتوكول المستهدف؛ حيث توجد إصدارات تعمل عبر شبكة إيثرنت فقط.
- احتفظ بالواجهة البصرية. لا تُعاد استخدام الألياف إلا في الحالات التي يستخدم فيها الجهاز البصري الجديد نفس الموصل ونفس نوع الألياف (أحادية النمط أو متعددة النمط).
- حافظ على مستوى APC طوال الوقت. يجب عدم توصيل موصلات APC وUPC ببعضها البعض.
- التزم بطريقة واحدة لتحديد القطبية. كابلات NVIDIA المباشرة من نوع «أوبتيك إلى أوبتيك» هي كابلات كروس أوفر مستقيمة من النوع B MPO-12/APC.
- أعد اختبار الصناديق التي تحتفظ بها. قم بقياس خسارة الإدخال وقارنها بحد القناة، على سبيل المثال 3.0 ديسيبل لمعيار 400GBASE-DR4.[5]
- أعد التحقق من الأطوال مقارنةً بالتصميم المرجعي الجديد. تختلف حدود الطول باختلاف كل تصميم.
- خطط للسرعة التالية. كما تدعم حاويات المحولات XDR من NVIDIA كابلات وأجهزة الإرسال والاستقبال NDR لضمان التوافق مع الإصدارات السابقة. وتحتاج الواجهة ذات الـ 16 ليفًا، مثل 800GBASE-DR8، إلى 16 ليفًا لكل منفذ.
المجالات التي تُستخدم فيها شبكة «ألترا إيثرنت»
اتحاد «ألترا إيثرنت» (UEC) هو منظمة معايير تعتمد على التوافق في الآراء وتعمل تحت مظلة مؤسسة لينكس، وقد أصدر مواصفات «ألترا إيثرنت» الإصدار 1.0 في 11 يونيو 2025.[6] ويهدف هذا المعيار إلى جعل شبكة إيثرنت أكثر ملاءمة لحركة مرور البيانات الخاصة بالذكاء الاصطناعي والحوسبة عالية الأداء. وهو معيار جديد في مجال شبكات الذكاء الاصطناعي، ولم يصبح بعد بديلاً عن «إنفيني باند» أو «RoCE»، لذا لا تزال البنية التحتية للذكاء الاصطناعي تعتمد حاليًا على أحد هذين النظامين. إذا كنت تخطط لإنشاء بنية شبكية اليوم، فاستفسر من موردي المحولات وبطاقات الشبكة (NIC) عن ميزات UEC التي تدعمها منتجاتهم، وعما إذا كانت المكونات البصرية والكابلات الحالية قابلة للاستخدام مع هذه البنية.
وصلات الألياف الضوئية من MPO لمجموعات InfiniBand وEthernet
كابلات التصحيح MPO/MTP: كابلات ربط رئيسية وكابلات توصيل من نوع MPO/MTP أحادية النمط ومتعددة النمط للوصلات ذات السعة 400G و800G. عرض كابلات MPO/MTP
تعمل الروابط السلبية الموصوفة أعلاه بنفس الطريقة في كلا النوعين من النسيج، وهي ما توفره شركة YingFeng. لدينا كابلات التوصيل MPO/MTP تتوفر هذه الألياف بنمط أحادي OS2 ونمط متعدد OM3 أو OM4، مع أطراف APC أو UPC، في إصدارات ذات 8 و12 و16 و24 ليفًا؛ كما تتوفر إصدارات منخفضة الخسارة. يتم إنتاج مجموعات MPO/MTP في غرفة نظيفة، وتتوفر عينات عند الطلب. بالنسبة للأجزاء السلبية الأخرى، يرجى الاطلاع على الألياف البصرية لمركز البيانات. للحصول على عرض أسعار، أخبرنا أرقام قطع غيار أجهزة الإرسال والاستقبال، وأطوال الوصلات، وطريقة تحديد القطبية.
الأسئلة الشائعة
هل شبكة InfiniBand تعتمد على النحاس أم الألياف الضوئية؟
كلاهما. غالبًا ما تستخدم الوصلات القصيرة داخل الحامل كابلات نحاسية ذات توصيل مباشر، بينما تستخدم الوصلات الأطول كابلات بصرية نشطة أو أجهزة إرسال واستقبال تعمل بالألياف الضوئية. وفي الجيل 400G، تستخدم أجهزة الإرسال والاستقبال موصلات MPO-12/APC عبر ألياف أحادية النمط أو متعددة النمط.
هل تستخدم NVIDIA شبكة InfiniBand أم شبكة إيثرنت؟
كلاهما. تبيع شركة NVIDIA محولات Quantum InfiniBand ومحولات Spectrum Ethernet، وتنشر تصميمات مرجعية لكل منهما، كما أن بطاقات الشبكة ConnectX-7 الخاصة بها تدعم كلا البروتوكولين.
هل يمكن استخدام نفس كابلات الألياف الضوئية لشبكتي InfiniBand وEthernet؟
نعم، ضمن نفس الجيل والواجهة البصرية. موصلات MPO-12/APC والألياف هي نفسها؛ وما يجب التحقق منه هو ما إذا كان كل جهاز إرسال واستقبال يدعم البروتوكول المستهدف. انظر هل يعني تغيير شبكات التبديل الحاجة إلى كابلات ألياف ضوئية جديدة؟ للاطلاع على التفاصيل الكاملة.
ما هو RoCE؟
RoCE (RDMA عبر شبكة إيثرنت المتقاربة) هو معيار نقل صناعي، حددته جمعية IBTA، يتيح تشغيل تقنية RDMA على شبكات إيثرنت العادية من الطبقتين 2 و3. وقد صدرت المواصفة الأولى في عام 2010.
هل تحل شبكة إيثرنت محل شبكة إنفينيباند؟
في شبكات الخلفية الخاصة بالذكاء الاصطناعي، تزايدت حصة شبكة إيثرنت بسرعة منذ أواخر عام 2023، وفقًا لتقرير مجموعة Dell’Oro الصادر في يوليو 2025. ولا تزال شبكتا إيثرنت وإنفينيباند تُباعان وتُنشران، وتنشر شركة NVIDIA تصميمات مرجعية لكلتيهما.
المراجع الخارجية
- رابطة تجارة إنفيني باند: نبذة عن InfiniBand
- Gangidi وآخرون، «RDMA عبر شبكة الإيثرنت للتدريب الموزع على الذكاء الاصطناعي على نطاق ميتا»، ACM SIGCOMM 2024: مكتبة ACM الرقمية
- مجموعة ديل أورو: شبكة إيثرنت تتفوق على شبكة إنفينيباند في شبكات الخلفية الخاصة بالذكاء الاصطناعي (بيان صحفي، 15 يوليو 2025)
- NVIDIA: كابلات وأجهزة إرسال واستقبال LinkX بسرعة 400 جيجابت في الثانية - الصفحة الرئيسية (وثائق المنتج)
- اتحاد تكنولوجيا الألياف الضوئية TIA: نظرة عامة على تطبيق 400GBASE-DR4
- اتحاد «ألترا إيثرنت»: مواصفات شبكة إيثرنت فائقة السرعة الإصدار 1.0 (11 يونيو 2025)