قطعی گسترده در رک‌های توزیع (Zone A)

در حال حاضر به دلیل بروز مشکل سخت‌افزاری در سوئیچ‌های Core لایه دسترسی، ارتباط با بخشی از سرورها قطع می‌باشد. تیم مهندسی شبکه در محل دیتاسنتر در حال رفع مشکل هستند.

وضعیت سرویس‌ها

سرورهای ابری (Cloud Compute) قطعی کامل (Outage)
فضای ذخیره‌سازی شیءگرا (Object Storage) افت عملکرد (Degraded)
سیستم مسیریابی BGP عدم دسترسی (Unreachable)

گزارش لحظه‌ای حادثه (Timeline)

امروز، ساعت $14:30$
در حال تعویض قطعات سخت‌افزاری
تیم مستقر در دیتاسنتر ماژول‌های آسیب‌دیده سوئیچ‌های اصلی را شناسایی کرده‌اند. فرآیند جایگزینی تجهیزات (RMA) آغاز شده است. پیش‌بینی می‌شود طی $45$ دقیقه آینده مسیریابی شبکه با ظرفیت $10 \text{ Gbps}$ به حالت عادی بازگردد.
امروز، ساعت $13:45$
شناسایی منشأ اختلال
بررسی‌های اولیه نشان می‌دهد که نوسان برق در یکی از PDU های رک شماره $42$ باعث راه‌اندازی مجدد (Reboot) سوئیچ‌های لایه ۳ شده است که منجر به افت پکت (Packet Loss) تا مرز $98\%$ در این ناحیه گردیده است.
امروز، ساعت $13:10$
در حال بررسی اختلال
سیستم‌های مانیتورینگ ما هشدارهایی مبنی بر عدم دسترسی به تعدادی از نودهای پردازشی دریافت کرده‌اند. مهندسان شبکه در حال بررسی لاگ‌های سیستمی جهت یافتن علت قطعی ارتباط هستند.