دومین قطعی بزرگ تاریخ GitHub Actions
خلاصهٔ کاملتر
نویسنده که روی یه ماد GTA 5 کار میکرده، تعریف میکنه کارش تموم و آمادهٔ تگزدن بوده ولی هیچ ورکفلو، بیلد یا ریلیزی اجرا نمیشده. از همونجا رفته سراغ صفحهٔ وضعیت گیتهاب و دیده روز درستوحسابیای رو برای شیپکردن انتخاب نکرده.
قطعی بزرگ ساعت ۱۵:۲۲ به وقت UTC روز ۶ اوت شروع شده. وبهوکها throttle بودن و فقط حدود ۱۵ درصدشون پردازش میشد، برای همین پوشها و پولریکوئستها بیسروصدا هیچی رو راه نمینداختن. رانرها، چه هاستشده چه سلفهاستد، جابهایی تحویل میگرفتن که دیگه وجود نداشت و از جابهایی که وارد صف میشدن حدود ۶۵ درصد موفق میشد. دامنهٔ خرابی به دیپلوی Pages، کدریویو Copilot، مهاجرتهای Enterprise Importer و تحویل وبهوک هم رسیده بود.
نویسنده تقویم آپتایم Actions رو ماهبهماه دستی مرور کرده و میگه تو کل تاریخ این سرویس فقط یه قطعی بزرگ طولانیتر بوده: ۸ ساعت و ۱۱ دقیقه در ۱۶ مه ۲۰۲۱. علت اون یکی رو خود گیتهاب منتشر کرده بود؛ یه کلید خارجی برای توکنهای scoped از سقف INT32 رد شده بود، یعنی شمارنده به ۲٬۱۴۷٬۴۸۳٬۶۴۷ رسیده و تموم کرده بود. مهاجرت اسکیمای طولانی به INT64 هم دلیل کشاومدن ماجرا بود.
بهعنوان زمینه، نویسنده به آمار COO گیتهاب اشاره میکنه: مصرف Actions از ۵۰۰ میلیون دقیقه در هفته در ۲۰۲۳ به یک میلیارد در ۲۰۲۵ و بعد ۲.۱ میلیارد در یک هفته رسیده، و کامیتها از یک میلیارد در کل سال ۲۰۲۵ به ۲۷۵ میلیون در هفته. به گفتهٔ نویسنده بخش زیادی از این شیب از توسعه با ایجنتها میاد، چون هر اجرای ایجنت یه بیلد و تست و تیک سبز میخواد.
خودش تأکید میکنه این فقط زمینهست نه تشخیص علت؛ ممکنه ظرفیت باشه یا صرفاً یه دیپلوی خراب. با این حال میگه اگه بار واقعاً مقصر باشه، هر دو رکورد یه ریشه دارن: رشد گیتهاب سریعتر از یکی از محدودیتهای خودش. در آپدیت پست هم اومده که گیتهاب حادثه رو ساعت ۰۲:۰۴ به وقت UTC حلشده اعلام کرده، آمار نهایی ۷ ساعت و ۲۶ دقیقه قطعی بزرگ بهعلاوهٔ ۵۲ دقیقه قطعی جزئی بوده و آپتایم اوت ۲۰۲۶ روی ۹۵.۳۶ درصد نشسته. تحلیل ریشهای هنوز منتشر نشده.
نکات کلیدی:
- قطعی بزرگ GitHub Actions در ۶ اوت ۲۰۲۶: ۷ ساعت و ۲۶ دقیقه، بهعلاوهٔ ۵۲ دقیقه قطعی جزئی
- فقط ۴۵ دقیقه کمتر از رکورد ۱۶ مه ۲۰۲۱ که ۸ ساعت و ۱۱ دقیقه بود
- وبهوکها تا حدود ۱۵ درصد throttle شدن و رانرها جابهای ازبینرفته میگرفتن
- Pages، کدریویو Copilot، Enterprise Importer و تحویل وبهوک هم درگیر شدن
- علت رکورد ۲۰۲۱ عبور یه کلید خارجی از سقف INT32 بود؛ علت قطعی امسال هنوز اعلام نشده
