۵ اصل طلایی مقاومت عملیاتی از دید یک CTO
خلاصهٔ کاملتر
اینسیدنتهای عملیاتی — یعنی لحظاتی که سیستمها خراب میشن یا سرویس قطع میشه — اجتنابناپذیرن. اولین و مهمترین اصل اینه که این واقعیت رو بپذیریم. تکیه به یه مهندس قهرمان که همیشه اوضاع رو نجات بده، یه استراتژی نیست. چیزی که واقعاً کار میکنه یه playbook مشخص و فرهنگ تیمیه که از طریق تمرین مکرر و آگاهانه شکل گرفته.
از منظر فنی، مقاومت یعنی سیستمهایی بسازیم که وقتی بخشی از اونا خراب میشه، کل سرویس از پا در نیاد — این مفهوم رو «تخریب تدریجی» (graceful degradation) میگن. ابزارهایی مثل auto-scaling، load balancing و سادگی معماری در این مسیر کمک میکنن. به همون اندازه مهمه که observability داشته باشی؛ یعنی بتونی در لحظه ببینی تو production چی داره میگذره. طبق گزارش New Relic در سال ۲۰۲۵، هزینهی میانهی یه قطعی بزرگ حدود ۲ میلیون دلار در ساعت یا ۳۳ هزار دلار بهازای هر دقیقهست.
اما معماری فنی بهتنهایی کافی نیست. اینسیدنتها با کارهای روتین فرق دارن — مبهمن، زمانبُرن و به نوع متفاوتی از تفکر نیاز دارن. دو مفهوم کلیدی اینجا مطرح میشه: psychological safety (امنیت روانی) یعنی اینکه هر کسی بدون ترس از قضاوت بتونه مشکل رو مطرح کنه، و blameless culture (فرهنگ بدون سرزنش) یعنی بهجای «تقصیر کی بود؟» بپرسیم «چی یاد گرفتیم؟»
سازمانهای بالغ فقط downtime رو اندازه نمیگیرن — یادگیری رو هم اندازه میگیرن. هر اینسیدنت یه فرصت یادگیریه و نتایج post-incident review باید دنبال بشه و به چرخهی توسعه برگرده. نکتهی مهم اینه که یادگیری با رفع باگ یکی نیست؛ درک عمیقتر از اینکه چرا یه رویداد اتفاق افتاد، معمولاً به راهحلهای بهتری میرسه.
اینسیدنتها در واقع لحظات رهبری هستن. واکنش CTO و مدیران تیم، مستقیماً فرهنگ تیم رو شکل میده. آیا آروم هستی؟ بهدنبال راهحلی یا دنبال مقصری؟ تیم از رهبرش الگو میگیره. علاوه بر این، post-incident write-upها باید برای طیف وسیعتری از افراد — نه فقط تیم on-call — نوشته بشن تا به حافظهی سازمانی تبدیل بشن.
نکات کلیدی:
- اینسیدنتها حتمیان؛ آمادگی مهمه، نه امیدواری
- observability قوی و معماری ساده زمان تشخیص مشکل رو کاهش میده
- امنیت روانی و فرهنگ بدون سرزنش از پایههای لازم برای واکنش موثر تیمه
- یادگیری از اینسیدنتها با رفع باگ فرق داره و باید جدی گرفته بشه
- CTO باید هم در لحظهی بحران و هم در دوران آرام، فرهنگ مناسب رو مدل کنه
