عندما تجاوزت طاقة التصميم الحراري لوحدة معالجة الرسومات 500 واط ثم 700 واط لكل حزمة، توقف تبريد الهواء عن كونه خيارًا هندسيًا وأصبح مستحيلًا فيزيائيًا. تتجاوز الكثافة الحرارية لمسرعات الذكاء الاصطناعي الحديثة ما يمكن أن يبدده أي تدفق هواء معقول. التبريد السائل، الذي كان في السابق مخصصًا للحوسبة الفائقة، أصبح الآن البنية الحرارية الافتراضية لكل مجموعة تدريب جادة للذكاء الاصطناعي.
ولكن هذه هي الحقيقة غير المريحة التي تكتشفها فرق العمليات بعد الآلاف القليلة من عمليات النشر الأولى: لا يمكن الاعتماد على حلقة التبريد إلا بقدر موثوقية أضعف نقطة اتصال بها. المضخات زائدة عن الحاجة. يتم لحام الألواح الباردة. يتم تشكيل المشعبات من المخزون الصلب. ومع ذلك، تظل القارنات السريعة والخراطيم التي تربط مشعب الحامل بلوحة التبريد للخادم هي المصدر الوحيد الأكثر شيوعًا لفقد السوائل، ودخول الهواء، والصيانة غير المخطط لها في منشآت الذكاء الاصطناعي المبردة بالسوائل.
هذا ليس مصدر قلق بسيط للسباكة. يمكن لقطرة واحدة على واجهة أعمى أن تدمر وحدة GPU التي تبلغ قيمتها أكثر من سيارة فاخرة. يمكن أن يؤدي تسرب الهواء المجهري إلى إدخال الأكسجين المذاب في حلقة مغلقة، مما يؤدي إلى تسريع التآكل والنمو البيولوجي. يمكن للموصل الذي يتطلب قوة إدخال مفرطة أن يمنع الفني الميداني من إكمال عملية التبديل السريع خلال ساعات الذروة للتدريب. تحدد قارنات التوصيل السريعة والخراطيم التي تحددها ما إذا كانت البنية التحتية للتبريد السائل لديك أحد الأصول أو الالتزامات.
استجابت الصناعة بمعايير أكثر صرامة، ومواصفات مواد جديدة، وإعادة تفكير أساسية فيما يجب أن يفعله الموصل "السريع" فعليًا في مركز بيانات الذكاء الاصطناعي. تتناول هذه المقالة المتطلبات الفنية وعلوم المواد وحقائق سلسلة التوريد وراء القارنات السريعة والخراطيم التي تجعل التبريد السائل الحديث باستخدام الذكاء الاصطناعي أمرًا ممكنًا.
لم يتم اختراع قارنة التوصيل السريع لمراكز البيانات. لقد خدمت قارنات التوصيل السريعة الهيدروليكية الزراعة والبناء والآلات الصناعية لعقود من الزمن. إنها قوية، وغير مكلفة، ومصممة للبيئات التي يكون فيها سقوط بضع قطرات من السائل الهيدروليكي على الأرض أمرًا مزعجًا، وليس كارثة.
تفرض مراكز بيانات الذكاء الاصطناعي مجموعة مختلفة من القيود. السائل ليس زيتًا هيدروليكيًا ولكنه ماء منزوع الأيونات، وغالبًا ما يتم خلطه مع بروبيلين جليكول أو إيثيلين جليكول. يجب أن تكون المواد متوافقة مع الألواح الباردة المصنوعة من الفولاذ المقاوم للصدأ، والقنوات الدقيقة النحاسية، وأختام EPDM أو PTFE. تتأرجح درجة حرارة التشغيل من درجات حرارة العرض المبردة التي تقترب من 15 درجة مئوية إلى درجات حرارة تتجاوز 60 درجة مئوية في الرفوف عالية الكثافة. ويجب أن يبقى الموصل على قيد الحياة لآلاف دورات التزاوج دون أن يفقد سلامة الختم.
تهيمن ثلاثة أوضاع فشل عند نشر قارنات الأغراض العامة في التبريد السائل:
الحل ليس مجرد حلقة دائرية أفضل. إنها فلسفة تصميم مختلفة بشكل أساسي: قارنة التوصيل السريع ذات الفصل الجاف والعمياء المصممة خصيصًا للتبريد الإلكتروني.
أدرك مشروع Open Compute Project، المعروف باسم OCP، أن تصميمات الموصلات الخاصة من شأنها أن تؤدي إلى تجزئة سوق التبريد السائل وإبطاء اعتمادها. تحدد مواصفات Universal Quick Disconnect الخاصة بها، والتي تسمى عادة UQD، المتطلبات الميكانيكية والأبعاد والأداء لقارنات التوصيل السريعة العمياء المستخدمة في التبريد السائل من جانب الخادم.
تتناول مواصفات UQD العديد من المعلمات المهمة:
| المعلمة | متطلبات UQD | المقرنة الصناعية القديمة |
|---|---|---|
| قوة الإدراج | 40 ن أو أقل | 80 إلى 100 ن |
| معدل التسرب عند قطع الاتصال | 0.1 مل أو أقل لكل قطع اتصال | 0.5 إلى 2 مل لكل قطع |
| دورات التزاوج | 500 الحد الأدنى | 50 إلى 200 |
| مادة الختم | EPDM أو ما يعادلها | NBR أو البولي يوريثين |
| مادة الجسم | الفولاذ المقاوم للصدأ 304 أو 316L | النحاس أو الكربون الصلب |
| درجة حرارة التشغيل | -40 إلى 85 درجة مئوية | -20 إلى 100 درجة مئوية |
يعد التمييز بين UQD وLQC مهمًا أيضًا. تم تصميم موصلات UQD لجانب الخادم، حيث تكون المساحة محدودة، وتكون معدلات التدفق معتدلة، ويلزم التزاوج الأعمى. يشير LQC، أو Liquid Quick Connect، إلى موصلات أكبر على مستوى الحامل تتعامل مع معدلات تدفق أعلى وقد تستخدم آليات قفل مترابطة. كلاهما ضروري في حلقة تبريد سائلة كاملة، لكنهما يخدمان أدوارًا مختلفة ويتبعان معايير أبعاد مختلفة.
يجب أن تحقق قارنة التوصيل UQD المتوافقة أداء الفصل الجاف. وهذا يعني أنه عند فصل أداة التوصيل، يقتصر السائل المتبقي على جانب الخادم على الحجم الصغير المحصور بين الصمام ووجه التزاوج. يجب أن يغلق الصمام قبل أن ينفصل الختم، مما يمنع أي تيار أو رذاذ مستمر.
يوضح الرسم البياني التالي البنية الداخلية لقارنة التوصيل السريعة النموذجية المصممة للتبريد السائل لخادم الذكاء الاصطناعي. تشمل الميزات الرئيسية غلاف التوجيه ذاتي المحاذاة، وقفاز الصمام المحمّل بنابض، وختم الوجه EPDM.
تحدد المواد المستخدمة في قارنات التوصيل السريعة والخراطيم توافقها الكيميائي، واستقرارها الحراري، وعمر الخدمة. في التبريد السائل لمركز بيانات الذكاء الاصطناعي، تتطلب ثلاث فئات من المواد اهتمامًا دقيقًا.
يعد النحاس شائعًا في أدوات التوصيل الصناعية ولكنه غير مقبول في أنظمة المياه منزوعة الأيونات. يحتوي النحاس على الزنك، الذي يتسرب إلى السائل بمرور الوقت، مما يزيد من الموصلية ويعزز التآكل الجلفاني عند إقرانه بمكونات النحاس أو الفولاذ المقاوم للصدأ. معيار التبريد السائل بالذكاء الاصطناعي هو الفولاذ المقاوم للصدأ 304 أو 316L.
يوفر 316L مقاومة فائقة للتآكل الناجم عن الكلوريد، وهو أمر مهم عندما تتحلل السوائل القائمة على الجليكول وتطلق الكلوريدات النزرة. بالنسبة للمنشآت التي تستخدم المياه المعالجة أو الحلقات المعدنية المختلطة، فإن 316L هو الخيار الأكثر أمانًا. التكلفة الإضافية لا تذكر مقارنة بتكلفة استبدال حلقة المبرد.
يعد الختم العنصر الأكثر أهمية في أي قارنة توصيل سريعة. ويجب أن تظل مرنة عبر نطاق درجة حرارة التشغيل، وأن تقاوم مجموعة الضغط، وتحافظ على واجهة مانعة للتسرب بعد مئات دورات التزاوج. EPDM، أو إيثيلين بروبيلين ديين مونومر، هو مادة الختم المفضلة للتبريد السائل لأنه يوفر توافقًا ممتازًا مع الماء منزوع الأيونات ومخاليط الجليكول، ونطاق درجة حرارة تشغيل واسع من -40 إلى 85 درجة مئوية، ومقاومة جيدة للشيخوخة والأوزون.
النتريل، أو NBR، شائع في التطبيقات الهيدروليكية ولكنه يتحلل بشكل أسرع في الماء الساخن والجليكول. توفر أختام السيليكون نطاقًا أوسع من درجات الحرارة ولكنها تتمتع بنفاذية أعلى لبخار الماء وتكون أكثر عرضة للتورم في الجليكول. بالنسبة للتبريد السائل لمركز بيانات الذكاء الاصطناعي، تعد EPDM هي المواصفات الأساسية للقارنات المتوافقة مع UQD.
إن الخرطوم الذي يربط مشعب الحامل بلوحة التبريد الخاصة بالخادم ليس مكونًا سلبيًا. فهو يؤثر على معدل التدفق، وانخفاض الضغط، والموثوقية الشاملة للاتصال. ثلاثة معلمات للخرطوم هي الأكثر أهمية:
إن التحول إلى التبريد السائل ليس تدريجيًا. أفاد محللو الصناعة الذين يتابعون الإدارة الحرارية لمراكز البيانات أن عمليات نشر التبريد السائل تنمو بمعدل سنوي مركب يتجاوز 30 بالمائة، مدفوعة بالكامل تقريبًا بأحمال عمل التدريب على الذكاء الاصطناعي والاستدلال. تمثل قارنات التوصيل السريع من جانب الخادم، من نوع UQD الذي يتزاوج مباشرة مع لوحة التبريد، ما يقرب من 46 بالمائة من سوق موصلات التبريد السائل من حيث الحجم.
هذا النمو له آثار على سلسلة التوريد. قد يحتوي حامل الذكاء الاصطناعي الواحد على 8 إلى 16 خادمًا، يحتوي كل منها على 2 إلى 4 ألواح تبريد و4 إلى 8 أزواج قارنات توصيل سريعة. وبالتالي، تتطلب مجموعة التدريب الكبيرة التي تحتوي على 10000 خادم ما بين 80000 إلى 320000 قارنة توصيل سريعة فردية. وعلى هذا المقياس، فإن معدل الخلل البالغ 0.1 بالمائة يُترجم إلى مئات من حالات الفشل الميداني.
مثال على نطاق النشر
10,000 خادم × 4 أطباق باردة × 2 قارنة توصيل لكل لوحة = 80,000 قارنة سريعة
عند كل 500 دورة تزاوج، ستقوم المنشأة بإجراء 40 مليون عملية تزاوج طوال فترة خدمتها
يعني معدل الخلل بنسبة 0.1 بالمائة حدوث 80 فشلًا في الحقل مما يتطلب توقف الخادم
يشرح هذا الحساب لماذا أصبح امتثال OCP UQD أحد متطلبات المشتريات لمشغلي السحابة الرئيسيين. لا يتعلق الأمر بتفضيل بائع على آخر. يتعلق الأمر بالتأكد من أن كل موصل في عملية نشر ضخمة يلبي معيار أداء معروفًا وقابلاً للاختبار.
يتطلب تحديد المكونات الصحيحة مطابقة مواصفات قارنة التوصيل والخرطوم مع المتطلبات الحرارية والميكانيكية للنشر المحدد. تغطي القائمة المرجعية التالية المعايير الأساسية.
تحقق من أن قارنة التوصيل تفي بمواصفات الأبعاد والأداء الخاصة بـ OCP UQD. يتضمن ذلك قوة الإدراج، ومعدل التسرب، وعمر دورة التزاوج، وتركيب المواد. يجب على المورد الذي يدعي توافق UQD أن يقدم بيانات اختبار توضح التوافق.
يجب أن يتعامل المقرن والخرطوم مع معدل التدفق المطلوب دون انخفاض الضغط المفرط. بالنسبة لخادم يسحب 500 واط من الحرارة، يكون معدل التدفق من 0.5 إلى 1.0 لتر في الدقيقة نموذجيًا. ويجب تحديد حجم تصميم الصمام الداخلي للوصلة والقطر الداخلي للخرطوم وفقًا لذلك.
تأكد من أن جميع المواد المبللة، بما في ذلك جسم الصمام والأختام وبطانة الخرطوم، متوافقة مع كيمياء سائل التبريد المحددة. الماء منزوع الأيونات مع بروبيلين جليكول بتركيز 25 بالمائة هو السائل الأكثر شيوعًا، لكن بعض المنشآت تستخدم جلايكول الإيثيلين أو سوائل عازلة متخصصة.
تتطلب قارنات Blind-mate ميزات المحاذاة الذاتية لتوجيه علبة الخادم نحو المشاركة. ابحث عن أكمام التوجيه المشطوفة، أو تصميمات التركيب العائمة، أو آليات تعويض التسامح التي تسمح للقارنة بالمحاذاة حتى عندما لا يكون درج الخادم في موضعه بشكل مثالي.
قم بقياس الحد الأدنى لنصف قطر الانحناء للخرطوم وقارنه بمسار التوجيه داخل هيكل الخادم. سيؤدي الخرطوم الذي ينثني إلى تقييد التدفق وقد يؤدي إلى تلف البطانة الداخلية بمرور الوقت. توفر خراطيم EPDM مع طبقة تقوية مضفرة توازنًا جيدًا بين المرونة ومقاومة الضغط.
ليست كل حلقات التبريد السائلة متشابهة. يعتمد اختيار قارنة التوصيل السريعة على ما إذا كانت الحلقة على مستوى الخادم، أو على مستوى الحامل، أو على مستوى المنشأة.
| الهندسة المعمارية | نوع المقرنة | معدل التدفق النموذجي | متطلبات المفتاح |
|---|---|---|---|
| لوحة باردة على مستوى الخادم | UQD زميل أعمى | 0.5 إلى 1.5 لتر/دقيقة | قوة إدخال منخفضة، كسر جاف |
| مشعب الرف | LQC مترابطة | 5 إلى 20 لتر/دقيقة | تدفق عالي، قفل آمن |
| حلقة المرافق | مقرنة سريعة الصناعية | 20 إلى 100 لتر/دقيقة | المتانة وإمكانية الخدمة |
تعد قارنة التوصيل UQD على مستوى الخادم هي الأكثر أهمية لأنها الأكثر تزاوجًا والأقرب إلى الأجهزة الإلكترونية الحساسة. عادةً ما يتم تزاوج موصلات LQC على مستوى الحامل مرة واحدة أثناء التثبيت وتظل متصلة طوال عمر الحامل. تتم صيانة قارنات التوصيل على مستوى المنشأة من قبل موظفي المنشأة ولا تخضع لنفس قيود المساحة والقوة.
يشير UQD، أو Universal Quick Disconnect، إلى مواصفات OCP الخاصة بقارنات التوصيل العمياء من جانب الخادم. يشير LQC، أو Liquid Quick Connect، إلى قارنات توصيل أكبر على مستوى الحامل تتعامل مع معدلات تدفق أعلى وتستخدم عادةً آليات قفل ملولبة. تعطي قارنات UQD الأولوية لقوة الإدخال المنخفضة وأداء القطع الجاف، بينما تعطي قارنات LQC الأولوية لسعة التدفق والقفل الآمن.
يوفر EPDM مقاومة أفضل للماء الساخن ومخاليط الجليكول مقارنة بـ NBR. كما أن لديها نطاقًا أوسع لدرجة حرارة التشغيل ومجموعة ضغط أقل، مما يعني أنها تحافظ على قوة الختم بعد العديد من دورات التزاوج. يعتبر NBR أكثر ملاءمة للزيوت الهيدروليكية والوقود ولكنه يتحلل بشكل أسرع في سوائل التبريد المائية.
تتطلب مواصفات OCP UQD ما لا يقل عن 500 دورة تزاوج. يتم اختبار بعض قارنات التوصيل المتميزة حتى 1000 دورة أو أكثر. يعتمد عمر الخدمة الفعلي على نظافة السوائل، ومواد الختم، ودرجة حرارة التشغيل.
لا يُنصح باستخدام القارنات الصناعية القياسية للتبريد السائل لمركز بيانات الذكاء الاصطناعي. عادةً ما يكون لديهم معدلات تسرب أعلى، ويتطلبون قوة إدخال أعلى، وقد يستخدمون مواد غير متوافقة مع الماء منزوع الأيونات أو الجليكول. إن خطر تلف الإلكترونيات بالسوائل مرتفع للغاية بحيث لا يبرر انخفاض التكلفة.
تحدد مواصفات OCP UQD الحد الأقصى لمعدل التسرب عند 0.1 ملليلتر لكل قطع اتصال. هذا هو حجم السائل الذي قد يبقى على جانب الخادم بعد فصل قارنة التوصيل. أي تنقيط أو رذاذ مستمر أمر غير مقبول.
تحقق من مخطط التوافق الكيميائي الخاص بالشركة المصنعة للخرطوم لمعرفة كيمياء سائل التبريد وتركيزه المحددين. تتوافق خراطيم EPDM بشكل عام مع الماء منزوع الأيونات ومخاليط البروبيلين غليكول. إذا كان سائل التبريد يحتوي على مواد مضافة أو مثبطات للتآكل، فتحقق من التوافق مع تلك المركبات المحددة أيضًا.
يجب أن تتطلب قارنات التوصيل العمياء المتوافقة مع UQD قوة إدخال تبلغ 40 نيوتن أو أقل. يتيح ذلك للفني ربط قارنة التوصيل يدويًا بدون أدوات ويقلل من خطر المشاركة غير الكاملة في تطبيقات الزميل الأعمى.
سوف ينثني الخرطوم الذي يتم ثنيه بشكل أكثر إحكامًا من الحد الأدنى لنصف قطر الانحناء، مما يحد من التدفق ويزيد من انخفاض الضغط. وهذا يقلل من تدفق سائل التبريد إلى اللوحة الباردة ويمكن أن يؤدي إلى ارتفاع درجة الحرارة. قم دائمًا بتوجيه الخراطيم بمنحنيات لطيفة واحترم الحد الأدنى لمواصفات نصف قطر الانحناء الخاصة بالشركة المصنعة.
في التبريد السائل لمركز بيانات الذكاء الاصطناعي، لا تعد قارنة التوصيل السريع ومجموعة الخرطوم جزءًا من السباكة السلعية. إنه مكون مصمم بدقة ويجب أن يعمل بشكل موثوق لسنوات، عبر آلاف دورات التزاوج، على مقربة من الأجهزة الإلكترونية التي تبلغ قيمتها ملايين الدولارات. الفرق بين قارنة التوصيل UQD المتوافقة وقارنة التوصيل الصناعية ذات الأغراض العامة هو الفرق بين حلقة التبريد التي لا تحتاج إلى صيانة ومصدر التوقف المزمن.
مع استمرار ارتفاع كثافة طاقة خادم الذكاء الاصطناعي، سيزداد الطلب على قارنات التوصيل السريعة والخراطيم. إن معدلات التدفق الأعلى، وقيود المساحة الأكثر صرامة، وكيمياء التبريد الأكثر عدوانية سوف تدفع حدود التصميمات الحالية. يعد تحديد المكونات التي تفي بمعايير OCP UQD أو تتجاوزها هو الحد الأدنى من المتطلبات لأي نشر جدي للتبريد السائل.
بالنسبة للمهندسين الذين يصممون خوادم الذكاء الاصطناعي من الجيل التالي أو يقومون بترقية أنظمة التبريد السائلة الحالية لمراكز البيانات، فإن اختيار قارنات التوصيل السريعة والخراطيم يستحق نفس مستوى الاهتمام مثل اللوحة الباردة أو المضخة. تعتبر الحلقة المرنة موثوقة بقدر اتصالها غير الموثوق به.