طراحی Rack و Cabinet در دیتاسنتر کانتینری؛ ابعاد، چیدمان، Airflow و ظرفیت بار

  • فیدار کوثر
  • 1405/6/24
انتخاب رک استاندارد برای دیتاسنتر کانتینری
طراحی Rack و Cabinet در دیتاسنتر کانتینری؛ ابعاد، چیدمان، Airflow و ظرفیت بار

۱. کالبدشکافی محدودیت‌ها در معماری دیتاسنتر کانتینری

مراکز داده کانتینری و ماژولار صرفاً نسخه‌های کوچک‌شده دیتاسنترهای سنتی نیستند. طراحی زیرساخت فیزیکی در این محیط‌ها، یک چالش معماری مبتنی بر محدودیت‌های شدید است.

مهندسان باید الزامات سخت‌افزاری فناوری اطلاعات (IT) را با محدودیت‌های صلب هندسی، چالش‌های پیچیده ترمودینامیکی و فشارهای دینامیک سازه‌ای در فضای استاندارد کانتینرهای ISO تطبیق دهند.

چالش اصلی طراحان در معماری دیتاسنتر کانتینری، تقاطع سه محور حیاتی است:

  • محدودیت هندسی: استقرار رک‌ها و رعایت فواصل استاندارد راهروها در عرض بسیار محدود ۲.۴ متری کانتینر.
  • محدودیت ترمودینامیکی: دفع حجم عظیمی از بار حرارتی (Heat Load) در یک فضای فشرده بدون بروز پدیده بازگشت هوای گرم (Recirculation).
  • محدودیت سازه‌ای: حفظ یکپارچگی تجهیزات در برابر نیروهای برشی و پیچشی (G-forces) حین ترانزیت کانتینر فولادی.
این مقاله به‌عنوان یک چارچوب مرجع و مستند مهندسی تدوین شده است تا با تکیه بر استانداردهای جهانی نظیر TIA-942-C، ASHRAE TC 9.9، و ISO 1496-1، معماری فیزیکی و طراحی جریان هوا (Airflow) در دیتاسنترهای کانتینری را از حدس و گمان به محاسبات دقیق ریاضی تغییر دهد.

 

۲. هندسه و استانداردهای ابعادی کابینت در فضای محدود

طراحی چیدمان رک‌ها در دیتاسنتر کانتینری نیازمند درک دقیق ابعاد استانداردهای مخابراتی و تطبیق آن‌ها با فضای فیزیکی کانتینر است. اشتباه در محاسبه ابعاد مفید ریل‌ها یا انتخاب عرض نامناسب برای رک، منجر به تداخل فیزیکی سخت‌افزارها و اختلال در مسیر توزیع هوا خواهد شد.

 

۲.۱ الزامات داخلی رک؛ تشریح استاندارد EIA-310-E

تصور رایج مبنی بر اینکه «رک ۱۹ اینچی دقیقاً ۱۹ اینچ فضای داخلی دارد» یک خطای طراحی است. بر اساس استاندارد EIA-310-E (یا معادل آن IEC 60297-3-100)، عدد ۱۹ اینچ نمایانگر عرض فلنج خارجی (Outer Flange) تجهیزات است.
  • دهانه مفید داخلی (Usable Aperture): دقیقاً ۴۵۰.۸۵ میلی‌متر (۱۷.۷۵ اینچ) است.
  • فاصله مرکز تا مرکز سوراخ‌های نصب: ۴۶۵.۱۲ میلی‌متر.
  • ارتفاع استاندارد (1U): برابر با ۴۴.۴۵ میلی‌متر (۱.۷۵ اینچ).
استاندارد مرجع: رعایت دقیق تلرانس‌های استاندارد EIA-310-E برای ریل‌های نصب تجهیزات الزامی است. عدم رعایت این استاندارد منجر به تداخل مکانیکی شاسی سرورهای عمیق و PDUهای عمودی (Zero-U) شده و مسیر عبور کابل‌ها را مسدود می‌کند.

 

۲.۲ پارادایم TIA-942-C (ویرایش ۲۰۲۴) و لزوم استقرار رک‌های ۸۰۰ میلی‌متری

یکی از اشتباهات رایج در طراحی دیتاسنترهای ماژولار، استفاده پیش‌فرض از رک‌های با عرض ۶۰۰ میلی‌متر به بهانه صرفه‌جویی در فضا است. این رویکرد برای رک‌های توزیع شبکه فاجعه‌بار است. نسخه ۲۰۲۴ استاندارد الزامات استاندارد TIA-942-C در دیتاسنترهای کانتینری، استقرار رک‌های با عرض حداقل ۸۰۰ میلی‌متر را برای مناطق توزیع اصلی و میانی (MDA و IDA) اکیداً توصیه می‌کند.

سوئیچ‌های شبکه پرتراکم (مانند Cisco Nexus) از مسیرهای خنک‌کننده جانبی (Side-to-Side Airflow) استفاده می‌کنند. در یک رک ۶۰۰ میلی‌متری، حجم بالای کابل‌های Cat6A و فیبر نوری MPO همچون یک سد فیزیکی عمل کرده، جریان هوا را مسدود و باعث ایجاد نقاط داغ (Hotspots) می‌گردد.

 

ماتریس زیر، چارچوب تصمیم‌گیری مهندسی برای انتخاب عرض رک را نشان می‌دهد:

معیار تصمیم‌گیری کابینت ۶۰۰ میلی‌متری کابینت ۸۰۰ میلی‌متری
کاربری اصلی نودهای پردازشی (Compute/Storage) توزیع شبکه (MDA/IDA) و کابلینگ متراکم
تراکم کابل (Cable Density) کم تا متوسط بسیار بالا (تنه کابل‌های MPO/Cat6A)
مسیر جریان هوا (Airflow) مستقیم (Front-to-Back) جانبی (Side-to-Side) با فضای خالی طرفین
نتیجه‌گیری مهندسی: استفاده از رک ۶۰۰ میلی‌متری برای تجهیزات هسته شبکه، موجب اختلال شدید حرارتی و عدم انطباق با استاندارد کابل‌کشی ساخت‌یافته می‌شود. عرض ۸۰۰ میلی‌متر برای مدیریت کابل‌های عمودی (Vertical Cable Managers) در دیتاسنتر ضروری است.

 

۲.۳ پارادوکس فضایی راهروها (Aisle Clearances)

یکی از بزرگترین چالش‌های معماری کانتینر، تضاد هندسی بین استانداردهای راهرو و فضای فیزیکی کانتینر است. استاندارد TIA-942-C برای دسترسی و تعمیرات، حداقل ۱.۲ متر فضای راهروی سرد (جلو) و ۰.۶ متر راهروی گرم (پشت) را تعیین کرده است.

با در نظر گرفتن عمق ۱.۲ متری رک‌های مدرن، مجموع عرض مورد نیاز ۳ متر خواهد بود. این در حالی است که عرض داخلی استاندارد کانتینر ISO حدود ۲.۳۵ متر است.

 

جدول زیر تحلیل تعارض فضایی و راهکارهای مهندسی را مقایسه می‌کند:

پارامتر فیزیکی الزامات استاندارد TIA (مرکز داده سنتی) محدودیت کانتینر ISO 1496-1 راهکار جایگزین ماژولار
فضای جلو (راهروی سرد) ۱.۲ متر عرض کل موجود: ~۲.۳۵ متر کاهش به ۰.۹ الی ۱ متر بر اساس توافق عملیاتی
عمق کابینت سرور ۱.۲ متر غیر قابل تغییر استفاده از رک ۱ الی ۱.۲ متری
فضای پشت (راهروی گرم) ۰.۶ متر فضای کافی وجود ندارد طراحی طولی با دریچه‌های دسترسی جانبی یا سیستم‌های سرمایش InRack

 

معماری دیتاسنتر کانتینری

 

۳. ترمودینامیک، دینامیک سیالات و مدیریت Airflow

محاسبه ظرفیت سرمایش صرفاً بر مبنای توان مصرفی (kW) خطای رایج طراحی است. جریان هوا باید بر اساس حجم متریک جابجایی هوا و قابلیت جذب حرارت در سیستم محاسبه شود تا از پدیده خفگی حرارتی جلوگیری گردد.

 

۳.۱ محاسبات دقیق حجم هوای مورد نیاز (CFM)

ظرفیت سرمایش در مراکز داده بر اساس اصول ترمودینامیک با فرمول دقیق حجم هوای مورد نیاز بر حسب فوت مکعب در دقیقه (CFM) به دست می‌آید.

استفاده از درصد فضای باز درب‌های پانچ‌شده رک (Perforated Door Percentage) به عنوان متریک اصلی سرمایش، یک اشتباه فنی است. معادله پایه ترمودینامیکی برای محاسبه جریان هوا به شرح زیر است:

CFM = (Watts × 3.16) / ΔT

عدد ثابت ۳.۱۶ از چگالی و ظرفیت گرمایی ویژه هوا در سطح دریا استخراج شده است. ΔT نمایانگر اختلاف دمای هوای خروجی (گرم) و ورودی (سرد) رک است.

 

جدول زیر (ماتریس محاسباتی جریان هوا و Delta-T) حجم هوای دقیق مورد نیاز برای بارهای رایج و دو هدف حرارتی مختلف را نشان می‌دهد:

توان تجهیزات (IT Load) اختلاف دمای هدف (Delta-T) جریان هوای مورد نیاز (CFM)
5 kW 20°F (11°C) 790 CFM
5 kW 35°F (19.4°C) 451 CFM
10 kW 20°F (11°C) 1580 CFM
20 kW 25°F (14°C) 2528 CFM
30 kW 25°F (14°C) 3792 CFM
نتیجه‌گیری مهندسی: معماری مکانیکی دیتاسنتر ماژولار باید به گونه‌ای باشد که فن‌های سیستم سرمایشی بتوانند دقیقاً حجم CFM محاسبه شده را بدون افت فشار استاتیک (Static Pressure Drop) به پنل جلویی سرورها تحویل دهند. شما می‌توانید از ابزارهای محاسبات آنلاین زیرساخت دیتاسنتر برای محاسبه دقیق بار خود استفاده نمایید.

 

۳.۲ بهینه‌سازی Delta T (ΔT) و تبعات قانون مکعب فن (Fan Cube Law)

استاندارد ASHRAE TC 9.9 دمای ورودی (Intake) به سرورها را در محدوده توصیه‌شده (Recommended) بین ۱۸ الی ۲۷ درجه سانتی‌گراد تعیین کرده است. کاهش غیرمنطقی اختلاف دما (ΔT) با پمپاژ هوای سرد مازاد (Over-supplying)، اثرات مخرب مهندسی دارد.

بر اساس قانون مکعب فن (Fan Cube Law)، توان مصرفی الکتروموتورها و فن‌ها با مکعب (توان سوم) سرعت آن‌ها رابطه مستقیم دارد. افزایش اندک در حجم پرتاب باد برای کاهش دمای راهرو، مصرف انرژی فن را به صورت تصاعدی بالا برده و شاخص بهره‌وری مصرف انرژی (PUE) را به شدت تخریب می‌کند.

 

۳.۳ استراتژی‌های Containment و حذف Bypass Airflow

فضای فشرده کانتینر، اثرات مخرب دو پدیده ترمودینامیکی را تشدید می‌کند:
  1. Bypass Airflow: فرار هوای سرد به سیستم برگشت بدون خنک‌سازی سخت‌افزار.
  2. Recirculation: مکش مجدد هوای گرم خروجی به ورودی سرورها.
برای حل این مشکل، ایزوله‌سازی راهروی سرد یا گرم (Containment) و مسدود کردن تمامی منافذ با استفاده از پنل‌های پرکننده (Blanking Panels) استاندارد (با فرم فکتور 1U و 2U) و کف‌پوش‌های عایق (Floor Grommets) در یک کانتینر الزامی است.

 

استاندارد رک دیتاسنتر

 

۴. تحلیل یکپارچگی سازه‌ای و استقامت در برابر بار

بزرگترین وجه تمایز دیتاسنتر ماژولار متحرک از نسخه ثابت، نیاز به تحمل تنش‌های دینامیک حین لجستیک است. این موضوع به دو چالش عمده تقسیم می‌شود: ظرفیت کف کانتینر و ساختار کابینت.

 

۴.۱ محدودیت‌های بار کف کانتینر (ISO 1496-1)

کف‌پوش استاندارد کانتینرهای حمل‌ونقل بر اساس استاندارد ISO 1496-1 آزمایش می‌شود. در این آزمون بار متمرکز ۷۲۶۰ کیلوگرمی توسط محور چرخ‌های لیفتراک به کف اعمال می‌شود و میزان تغییر شکل (Deflection) کف کانتینر نباید بیش از ۶ میلی‌متر باشد.

رک‌های فول‌ظرفیت فناوری اطلاعات بارهای نقطه‌ای استاتیک بسیار بالایی را از طریق چرخ‌ها (Casters) یا پایه‌های تراز (Leveling Feet) به کف وارد می‌کنند. اگر توزیع‌کننده‌های بار (Baseplates یا Spread Footing) در زیر پایه‌ها نصب نشود، کف کانتینر دچار خمش شده و تعادل سازه‌ای رک‌ها از بین می‌رود.

 

۴.۲ انتقال از بار استاتیک به دینامیک (چالش‌های ترانزیت)

هنگامی که کانتینر پر شده با تجهیزات توسط جرثقیل بلند می‌شود یا روی تریلر ترمزهای ناگهانی اعمال می‌گردد، بار استاتیک عمودی تبدیل به نیروهای عظیم برشی (Shear) و پیچشی (Torsional) می‌شود. محاسبه دقیق مرکز ثقل (CoG) با قرار دادن تجهیزات سنگین (مانند UPS و باتری‌ها) در پایین‌ترین یونیت‌های رک برای جلوگیری از واژگونی الزامی است.

 

جدول ارزیابی ریسک استاتیک و دینامیک زیر تفاوت بارهای وارد بر زیرساخت را نشان می‌دهد:

نوع بار (Load Type) منبع نیرو تأثیر بر سازه رک / کانتینر راهکار مهندسی و مهاربندی
استاتیک نقطه‌ای (Static Point Load) وزن تجهیزات و سرورها بر روی ۴ پایه رک خمش موضعی در شاسی و کف‌پوش چوبی/فلزی کانتینر نصب Baseplate توزیع بار در کف
نیروی برشی دینامیک (Dynamic Shear) شتاب‌گیری و ترمز شدید کامیون (G-Force طولی) شکست اتصالات پیچ‌ومهره‌ای در رک‌های معمولی استفاده از شاسی جوش‌کاری شده یکپارچه
نیروی پیچشی (Torsional) جابجایی توسط جرثقیل و لرزش‌های کشتی‌رانی تاب‌برداشتن پروفیل رک و جدا شدن ریل‌ها ایزولاتورهای ارتعاشی و مهار سقفی

 

۴.۳ استاندارد مقاومت لرزه‌ای و ارتعاشی NEBS Zone 4

رک‌های تجاری استاندارد IT (معروف به COTS) که با اتصال پیچ و مهره سرهم می‌شوند، در برابر ارتعاشات حمل‌ونقل به‌راحتی دچار ازهم‌گسیختگی خواهند شد. برای دیتاسنترهای کانتینری که به صورت از پیش ساخته و فول تجهیز به سایت‌های نهایی منتقل می‌شوند، رعایت استاندارد لرزه‌ای NEBS GR-63-CORE (Zone 4) الزامی است.
هشدار ایمنی: انتقال کانتینرهای حاوی رک‌های IT معمولی که تجهیزات سنگین در آن‌ها نصب شده است، موجب برش پیچ‌ها، آسیب قطعی سخت‌افزارها و حتی خطر واژگونی رک در حین جابجایی جرثقیل می‌شود. رک‌ها باید از نوع جوشکاری‌شده یکپارچه با پایه‌های تثبیت شاک‌گیر (Shock Isolators) باشند.

مسیر کابل‌کشی دیتاسنتر

 

۵. گذار به تراکم بالا (AI و High-Density) در معماری ماژولار

طراحی زیرساخت باید پاسخگوی روند صعودی مصرف برق سرورهای مبتنی بر هوش مصنوعی (AI) و پردازش گرافیکی (GPU) باشد.

۵.۱ عبور از مرزهای سرمایش هوایی (Air Cooling Ceiling)

قوانین فیزیک سیالات نشان می‌دهد که بهینه‌ترین سیستم‌های خنک‌کننده مبتنی بر هوا (حتی سیستم‌های In-Row)، در محیط کانتینری نهایتاً برای مدیریت بارهای ۳۰ تا ۴۰ کیلووات به ازای هر رک قابلیت اطمینان دارند.

تجهیزات جدید مانند کلاسترهای NVIDIA HGX ظرفیت حرارتی را به ۶۰ الی ۱۲۰ کیلووات ارتقا داده‌اند که با سرمایش هوایی (CRAC/CRAH) غیرقابل کنترل است.

 

۵.۲ استقرار سیستم‌های Liquid Cooling در فضای کانتینر

گذر از مرز ۳۰ کیلووات نیازمند پیاده‌سازی سیستم‌های کاربرد Liquid Immersion Cooling در مراکز داده یا سیستم‌های Direct-to-Chip Liquid Cooling (DLC) است. همچنین مبدل‌های حرارتی درب‌پشتی (RDHx) با عبور مستقیم سیال می‌توانند تا ۷۵ الی ۱۲۰ کیلووات بار را به شکل اکتیو در همان فضای راهرو مهار کنند.

الزام معماری: استقرار این سیستم‌ها مستلزم پیش‌بینی فضای فیزیکی تخصیص‌یافته برای استقرار واحدهای توزیع خنک‌کننده (CDU) درون کانتینر است (تقریباً ۶ الی ۸ فوت مربع فضای کف به ازای هر ۱۰۰ کیلووات بار سرمایش مایع).

 

۶. معماری توزیع کابل و رعایت حریم‌های الکترومغناطیسی

مدیریت کابلینگ در ارتفاع محدود کانتینر نیازمند رویکردهای مهندسی متفاوت از دیتاسنترهای سنتی است.

 

۶.۱ الزامات TIA-569-D و جداسازی مسیرها

طراحی مسیر کابل‌ها باید بر اساس استاندارد TIA-569-D و بند 392 مقررات ملی برق (NEC) صورت پذیرد. در دیتاسنترهای کانتینری، توزیع کابل‌ها از سینی‌های هوایی (Overhead Ladder Racks) ترجیح داده می‌شود تا پلنوم کف (فضای زیر کف کاذب در صورت وجود) برای مسیر هوای سرد مسدود نشود.

برای جلوگیری از تداخل الکترومغناطیسی (EMI)، مسیر جریان‌های فشار قوی AC باید حداقل ۱۵ سانتی‌متر (۶ اینچ) از کابل‌های داده UTP فاصله فیزیکی داشته باشد و در صورت تقاطع، حتماً با زاویه ۹۰ درجه از روی یکدیگر عبور کنند.

 

سرمایش مایع دیتاسنتر

 

۷. چک‌لیست نهایی مهندسی برای معماری کانتینری

برای طراحی بی‌نقص و استاندارد کالبد فیزیکی دیتاسنتر ماژولار خود، پیش از نهایی‌سازی طرح (Blueprint)، معیارهای زیر را با دقت ممیزی کنید:
  1. پذیرش هندسی: تطبیق عمق رک‌ها و راهروهای تعمیراتی با عرض ۲.۳۵ متری داخل کانتینر تایید شده باشد.
  2. عرض کابینت‌ها: پیش‌بینی حداقل عرض ۸۰۰ میلی‌متری برای رک‌های توزیع و سوئیچ‌های شبکه برای جلوگیری از مسدودی جریان هوا.
  3. محاسبات CFM: تایید انطباق حجم جریان هوای مکانیکی سیستم با فرمول CFM = (W × 3.16) / ΔT و جلوگیری از افت فشار.
  4. گرید لرزه‌ای: انتخاب رک‌های جوشکاری شده و یکپارچه سازگار با استقامت دینامیکی NEBS Zone 4 برای حمل‌ونقل.
  5. جداسازی مسیرها: تفکیک سینی‌های عبور کابل برق از شبکه‌های دیتا در سقف رک‌ها به منظور دفع نویز مغناطیسی (EMI).
  6. آمادگی تراکم بالا (AI): تخصیص فضا برای پمپ‌ها و CDU در صورت پیش‌بینی عبور توان رک از مرز ۳۰ کیلووات.

 

۸. سوالات متداول (FAQ)

  • ابعاد مفید و استانداردهای داخلی رک سرور (EIA-310) دقیقاً چقدر است؟
    • بر اساس استاندارد EIA-310-E، فاصله داخلی مفید دهانه رک برای نصب تجهیزات دقیقاً ۴۵۰.۸۵ میلی‌متر (۱۷.۷۵ اینچ) است و یک یونیت (1U) معادل ۴۴.۴۵ میلی‌متر محاسبه می‌شود.
  • نحوه محاسبه جریان هوای خنک‌کننده دیتاسنتر (CFM) چگونه است؟
    • الزام دقیق ترمودینامیکی برای محاسبه حجم هوا با فرمول CFM = (Watts × 3.16) / ΔT به دست می‌آید. به صورت تخمینی، هر یک کیلووات بار فناوری اطلاعات به ۱۶۰ تا ۲۰۰ فوت مکعب بر دقیقه جریان هوا نیاز دارد.
  • تفاوت کاربرد رک ۶۰۰ میلی‌متری و ۸۰۰ میلی‌متری در چیست؟
    • بر اساس ویرایش TIA-942-C، عرض ۸۰۰ میلی‌متر برای رک‌های شبکه و مناطق توزیع (MDA) الزامی است تا حجم بالای کابل‌های شبکه مانع جریان هوای جانبی سوئیچ‌ها (مانند سیسکو نکسوس) نشود؛ رک ۶۰۰ میلی‌متری صرفاً برای تجهیزات پردازشی مناسب است.
  • استانداردهای سازه‌ای و لرزه‌ای رک در دیتاسنتر سیار کدامند؟
    • مراکز داده ماژولار و کانتینری که جابه‌جا می‌شوند، باید مجهز به رک‌های جوش‌کاری شده و مقاوم با تاییدیه لرزه‌ای NEBS GR-63-CORE Zone 4 باشند تا تنش‌های دینامیک (شتاب، ترمز، جرثقیل) را بدون آسیب به سرورها تحمل کنند.

 

نیاز به مهندسی دقیق و استاندارد دیتاسنتر کانتینری دارید؟

از بررسی ابعاد سازه تا محاسبات پیچیده ترمودینامیک و طراحی چیدمان منطبق با استانداردهای TIA-942-C و NEBS Zone 4؛ معماران زیرساخت فیدار کوثر آماده ارائه مستندات مهندسی و اجرای تضمین‌شده پروژه‌های ماژولار شما هستند.

 

نظرات :
ارسال نظر :

بعد از ورود به حساب کاربری می توانید دیدگاه خود را ثبت کنید