بصريات لعناقيد الذكاء الاصطناعي: أنسجة مُحسّنة بالسكك وحدود CPO

عناقيد GPU لا تتوسع بالطريقة التي تتوسع بها طبقات الويب. النسيج الذي يربطها يفشل بشكل مختلف، ويُموَّل بشكل مختلف، ويُشترى بشكل مختلف.

تحتوي كبسولة تدريب بـ 1024 GPU على حوالي ألفي وحدة بصرية. بمعدل فشل ميداني لبضعة بالمائة سنويًا، فذلك عشرات من استبدالات الوحدات سنويًا، وكل استبدال حدث رابط يمكن أن يوقف مهمة تدريب متزامنة. هذه هي الحقيقة التي تعيد تأطير الربط البصري في عناقيد الذكاء الاصطناعي: السؤال ليس هل البصريات سريعة كفاية، بل هل يمكن للنسيج امتصاص معدل الفشل المصاحب لعدد الوحدات.

تلك مشكلة تصميم مختلفة عن شبكة مركز بيانات أمامية، حيث يمتص التوجيه رابطًا يرفرف دون أن يلاحظه أحد. وهي أيضًا سبب اهتمام مشغلي الذكاء الاصطناعي بعدادات الكلمات المشفرة المصححة ودرجات حرارة الهيكل بطريقة قد تبدو وسواسية لدى فريق بقياس ويب.

لماذا لا يتصرف مرور الذكاء الاصطناعي كمرور مركز البيانات

ثلاث خصائص للاتصال الجماعي تقود كل قرار لاحق.

الخاصيةما تفعله بالطبقة البصرية
اندفاعات متزامنةيتأرجح استخدام الرابط من خامل إلى مشبع خلال خطوة واحدة. رابط بطيء واحد يصبح متخلفًا يؤخر الجماع بأكمله
مصفوفة مرور واعية بالرتبةيمكن مواءمة الطوبولوجيا مع نمط المرور بدل عرض النطاق التقسيمي العام، وهو المنطلق الكامل لتحسين السكك
تسامح منخفض مع إعادة المحاولةخطوة أُعيدت تكلف أكثر من خطوة أبطأ. جودة الرابط ميزة إنتاجية، لا مربع تأكيد توافق

أثر المتخلف، ولماذا تهم هوامش FEC

في تخفيض شامل متزامن (all-reduce)، كل رتبة تنتظر الأبطأ. رابط يعمل عند 1e-7 pre-FEC BER بتصحيح FEC ثقيل ما زال يوصل بيانات صحيحة، لكن كمونه الفعال يرتجف مع ارتفاع حمل التصحيح. عبر جماع بـ 512 رتبة، تقترب احتمالية أن يكون على الأقل رابط واحد في دقيقة سيئة من الواحد.

هذا هو السبب الميكانيكي لتحديد أنسجة الذكاء الاصطناعي بهامش بصري أكثر مما يتطلبه المعيار. هامش قدرة 2 dB قد تسميه شبكة أمامية كريمًا، هو في كبسولة ذكاء اصطناعي تقريبًا الفرق بين مهمة تكتمل ومهمة تتوقف عند 90%.

الطوبولوجيا: ما الذي يشتريه تحسين السكك وما الذي يكلفه

يربط العمود-الورقة الكلاسيكي أي GPU بأي آخر في قفزتين. أمّا المُحسّن بالسكك فيربط مؤشر GPU n عبر كل الخوادم بمفتاح السكة n، بحيث تجلس الرتب المشاركة في جماع عادةً على بعد قفزة واحدة.

Spine-leaf:        GPU server -- leaf -- spine -- leaf -- GPU server
Rail-optimised:    GPU0 of all servers -- rail-0 switch group
                   GPU1 of all servers -- rail-1 switch group

الفائدة هي الكمون وعدد القفزات لمرور الذي يسود فعليًا. والتكاليف حقيقية وتستحق الذكر.

تعقيد الأسلاك يتناسب مع عدد السكك. ثماني سكك لكل خادم تعني ثماني مستويات نسيج متوازية، لكل منها انضباط كابلاتها، واتفاق قطبيتها، ونطاق فشلها. يصبح شرح قطبية MPO قراءةً مطلوبة لطاقم الكابلات لا وثيقة مرجعية.

تضيق نطاقات الفشل وتكثر. سكة واحدة منخفضة تُردي مجموعة محددة من الجماعات لا النسيج ككل. هذا أفضل لتوفر جزئي وأسوأ للتشخيص، لأن العرض يبدو كمشكلة برمجيات.

ترتفع البصريات لكل GPU. كل منفذ GPU هو وحدة. تحسين السكك لا يخلق منافذ، لكنه يزيل الاشتراك الزائد الذي كان سيسمح بمشاركتها، ولهذا تستقر كبسولات مُحسّنة بالسكك عند حوالي 1:1.

الاشتراك الزائد: حيث يُطلب 1:1 فعليًا

تحتاج كبسولات التدريب الكثيفة أنسجة غير مانعة أو قريبة من غير المانعة لأن الجماعات متزامنة النطاق الترددي. أما الاستنتاج والضبط الدقيق فيتسامحان مع 2:1 أو 3:1 لأن مرورهما أقل تماثلًا.

العاقبة البصرية مباشرة: كبسولة 3:1 تستخدم ثلث البصريات في الطبقة المشتركة زائدًا. اختيار النسبة إذًا قرار ميزانية بصريات بقدر ما هو قرار أداء شبكة، ويجب اتخاذه مع عدد الوحدات على الطاولة. يغطي دليل اختيار 800G ما الذي تكلفه تلك الوحدات من قدرة وتبريد بمجرد تثبيت العدد.

سلم الوسائط، مع الأرقام التي تحسمه

الوسيطالمدى عند 800Gقدرة لكل منفذمتى يفوزما يكسره
DAC سلبي1-2 m~0 Wمضيف نفس الرف إلى ToRتخفيف PAM4؛ صلابة الكابل عند عدد مسارات عالٍ
AEC3-5 m4-8 Wداخل الصف، رف إلى رفتباين برنامج المرحل (redriver) بين الموردين
LPO50-100 m8-10 Wصفوف مجاورة، كبسولات مقيدة بالقدرةيجب أن يمتص الـ SerDes المضيف فقد القناة؛ يحتاج اقترانًا مُتحققًا منه
بصريات قابلة للتوصيل (DR8 / 2xFR4)100-500 m / 2 km12-16 Wصف إلى صف، ورقة إلى عمودكثافة حرارة القفص، تصميم تدفق الهواء
CPOعلى الحزمةالأقل لكل بتمحولات ASIC من الجيل القادمالبصريات غير قابلة للاستبدال ميدانيًا

قاعدة الثلاثة أمتار واستثناءاتها

تحت 3 m، يكون DAC صحيحًا تقريبًا دائمًا: صفر قدرة، لا بصريات تفشل، لا تشخيص للمراقبة. بين 3 و5 m، يفوز AEC بالقدرة لكنه يدخل نمط فشل جديد، وهو المرحل. فوق 5 m، القرار بين LPO والقابلة للتوصيل التقليدية.

الاستثناء الجدير بالمعرفة: كبسولة مقيدة بالقدرة قبل أن تكون مقيدة بالمدى ستدفع علاوة لـ LPO حتى على مسافات يعمل عندها DAC، لأن القيد ليس الكابل، بل الـ PDU. قاعات مقيدة بالقدرة تتخذ خيارات غريبة لكنها عقلانية.

LPO قرار نظام، لا قرار وحدة

تزيل البصريات القابلة للتوصيل الخطية الـ DSP وتسلم مهمة المعادلة إلى الـ SerDes المضيف. قدرة الوحدة تنخفض بمقدار النصف تقريبًا، وهو كل الجاذبية. التكلفة أن الرابط يعتمد الآن على امتلاك الـ SerDes المضيف مدى معادلة كافٍ للقناة المحددة، وعلى قيام مورد المحول بالتحقق من تلك التركيبة.

لهذا يبدو اعتماد LPO غير متساوٍ: يعمل جيدًا حيث يُعرف المضيف والقناة ويُتحقق منهما معًا، وسيئًا حيث تُستَمد الوحدات مستقلة عن المحول. إذا كانت عملية الشراء لديك تعامل البصريات كسلعة تُشترى منفصلة عن المحولات، فسخيب LPO ظنك.

القيد الحقيقي لـ CPO هو قابلية الإصلاح، لا القدرة

توصل البصريات المدمجة مع الحزمة (CPO) أفضل قدرة لكل بت بإزالة الواجهة القابلة للتوصيل تمامًا. بيانات الموثوقية الميدانية المنشورة عن عمليات نشر CPO المبكرة مشجعة فعليًا على جانب معدل الفشل، لأن إزالة الموصلات والتعامل الميداني تزيل حصة كبيرة من أنماط الفشل.

القيد المتبقي تشغيلي: عند فشل منفذ CPO، تستبدل محولًا، لا وحدة. لكبسولة بألفي وحدة، عيب نموذج التوصيل هو أن الوحدات تفشل؛ وميزته أن فنيًا بقطعة احتياطية يصلحها في أربع دقائق. ما إذا كان مكسب موثوقية CPO يرجح حبيبيتها في الإصلاح يعتمد على نموذج التوفير لديك ونافذة الصيانة، ولم يحسم بالبيانات.

الواقع الحراري عند 800G، مبينًا بالواط

يحمل هيكل 800G بـ 64 منفذًا عند 16 W لكل وحدة حوالي 1 kW من حرارة البصريات، تصل إلى اللوحة الأمامية حيث تدفق الهواء أضعف. هذه ليست تفصيلًا يتعامل معه فريق المرافق بعد تجميد التصميم؛ بل تقيد عامل الشكل الذي يمكن استخدامه. يغطي مقارنة عامل الشكل لماذا يوجد حجم OSFP الإضافي أصلًا.

عاقبتان عمليتان لكبسولات الذكاء الاصطناعي تحديدًا:

كثافة الرف وقدرة البصريات تتقايضان. مضاعفة كثافة GPU تضاعف حرارة البصريات في نفس المساحة، ونظام التبريد الذي كان كافيًا عند نصف الكثافة لا يكون كافيًا عند الكثافة الكاملة. انمذج هذا قبل تثبيت تخطيط الرف.

التوجيه من قفص إلى قفص بند في ميزانية بصرية. تجميعات MPO المنهية مصنعيًا مقابل الذيول المنهية ميدانيًا تختلف حتى 0.5 dB من فقد الإدخال. في ميزانية فئة DR بـ 1.9 dB، ذلك ربع المخصص، يُنفق على قرار توصيل يتخذه عادةً من يرد على الهاتف أولًا. لدى شرح ميزانية الرابط الحساب.

تحديد كبسولة 800G في 2026

  1. عامل الشكل: اتبع القفص الأصلي لمورد المحول. OSFP حيث الهامش الحراري هو القيد الملزم، وQSFP-DD800 حيث كثافة المنافذ هي.
  2. PMD: DR8 للكابلات المهيكلة MPO الجديدة، و2xFR4 للمنشآت duplex القائمة، وVR8-class أو LPO فقط لنفس الرف مع اقتران مضيف مُتحقق منه.
  3. الإدارة: CMIS 4.0 أو أحدث، كي تكون التشخيص وفئات القدرة وتعيين المسارات قابلة للبرمجة من اليوم الأول.
  4. القياس عن بُعد: وصّل عدادات الكلمات المشفرة المصححة وpre-FEC BER إلى مجدول العنقود. تعامل مع رابط متدهور كحدث صيانة لا كضجيج، لأنه في جماع متزامن عطل مستقبلي.
  5. الهامش: احجز سعة القفص والتبريد لبصريات 200G لكل مسار حتى إن اشتريت سيليكون 100G لكل مسار اليوم. يشرح تحليل خريطة طريق 1.6T ما الذي يساويه ذلك الهامش فعليًا وأين هو تخميني.
  6. التوفير: حدّد حجم مجموعة الاحتياط مقابل عدد الوحدات، لا عدد المحولات. كبسولة بـ 2000 وحدة تحتاج مجموعة احتياط محددة لفشل الوحدات، ويجب أن تكون المجموعة من عائلة SKU واحدة للحفاظ على قابلية مقارنة خطوط الأساس التشخيصية.

المصادر

أعداد الوحدات وأرقام القدرة هي تقديرات تخطيط لعتاد 2026. تختلف أعداد البصريات على مستوى الكبسولة حسب الطوبولوجيا والاشتراك الزائد وتصميم التخزين؛ احسبها لنسيجك الخاص بدل تبني قاعدة عامة.

FAQ

لماذا تفضل عناقيد الذكاء الاصطناعي طوبولوجيات مُحسّنة بالسكك؟
مرور الاتصال الجماعي واعٍ بالرتبة. يضع تحسين السكك نفس مؤشر GPU عبر الخوادم على نفس المحول، مما يتيح لغالب المرور الاكتمال في قفزة واحدة ويقلل كمون الذيل الذي يعطّل خطوات التدريب المتزامنة.
هل يظل DAC قابلًا للتطبيق عند 800G داخل الرف؟
بالكاد. مدى DAC سلبي 800G حوالي 1-2 m بسبب تخفيف PAM4؛ وتمدد الـ AECs ذلك إلى حوالي 3-5 m بمرحلات نشطة. ما بعد ذلك، تسيطر البصريات. القدرة هي المقايضة: 12-16 W لكل وحدة بصرية مقابل 4-8 W لـ AEC بـ 800G.
ما الفرق العملي بين LPO وCPO اليوم؟
يزيل LPO الـ DSP من الوحدة، مخفضًا قدرة الوحدة بمقدار النصف تقريبًا، لكنه يتطلب من الـ SerDes المضيف تعويض فقد القناة، ما يجعله حساسًا لجودة المضيف والقناة. وينقل CPO البصريات إلى حزمة المحول: أفضل كفاءة قدرة، لكن البصريات تتوقف عن كونها قابلة للاستبدال ميدانيًا.
كم بصريات تحتاج كبسولة GPU بـ 800G فعليًا؟
في كبسولة مُحسّنة بالسكك غير مانعة مع منفذ 800G واحد لكل GPU، يكون عدد البصريات حوالي وحدة لكل GPU للنسيج بالإضافة إلى وحدة لكل مكافئ GPU للتخزين والإدارة، فكبسولة بـ 1024 GPU تستقر عند حوالي 2000-2500 وحدة قبل الاحتياطي. ذلك العدد، لا عدد المحولات، يقود ميزانية التوفير ومعدل الفشل.