AWS Emulator: یه AWS محلی برای ایجنتهای کدنویس
خلاصهٔ کاملتر
سوامی سیواسوبرامانیان تو یه پست مهمون روی وبلاگ ورنر فوگلز، CTO آمازون، از انتشار AWS Emulator میگه. این ابزار یه کپی محلی از AWS به ایجنتهای کدنویس میده تا کدشونو روش تست کنن. بیش از ۲۰۰ سرویس AWS رو پوشش میده، از روی بیش از ۴۰۰ مدل API ساخته شده و رایگان و آفلاین روی سیستم خودت اجرا میشه.
نویسنده داستان رو از حدود بیست سال پیش شروع میکنه. اون موقع با Al Vermeulen یه سرویس قفل توزیعشده به اسم Alf ساختن که روی Paxos کار میکنه (یعنی پروتکلی که چندتا سرور باهاش روی یه مقدار توافق میکنن). Alf هنوزم پشت سرویسهایی مثل S3 و DynamoDB هست. برای تستش، کل شبکه و زیرساخت رو داخل یه JVM شبیهسازی کردن تا بتونن پکتها رو عمداً بندازن و ترتیبهای خاص رخدادها رو بسازن. TLA+ هم کمک کرد و بیشتر باگهای همزمانی قبل از سرورهای واقعی پیدا شدن.
مشکل اینه که اون روش دستی با یه سیستم جواب میداد، ولی AWS حالا بیش از ۲۰۰ سرویس داره. ایده از Matt Goldberg اومد: اگه به ایجنت یه توصیف مکتوب از رفتار سرویس و خود سرویس واقعی رو بدی، خودش میتونه یه نسخه کارا بسازه. توصیف مکتوب همون مدلهای API عمومی به فرمت Smithy هست و مرجع مقایسه هم خود AWS.
روش کار بر پایه fidelity test هاست، یعنی سناریوهای واقعی مشتری مثل اینکه پیام دریافتی تو SQS تا تموم شدن visibility timeout از بقیه مخفی بمونه. ایجنتها اول تست رو اصلاح میکنن تا روی AWS واقعی پاس بشه، بعد امولاتور رو میسازن تا همون تست پاس بشه. اولین نسخه SQS با یه پرامپت به Kiro حدود ۱۵ دقیقه طول کشید. هر تغییر هم از یه merge gate رد میشه که چندتا ایجنت امنیتی توش بررسی خصمانه انجام میدن.
نویسنده معتقده کار مهندس وقتی ایجنتها کد مینویسن، ساختن spec، تست و merge gate هست. خودش با Kiro موتور replication مربوط به Alf رو دوباره ساخت؛ کاری که اولین بار چهار ماه طول کشیده بود. چهار شب ایجنت رو زیر نظر داشت تا فهمید ایجنت راهی برای چک کردن نتیجهش نداره. وقتی spec و محیط تست بهش داد، کار حدود دو ساعت طول کشید.
نکات کلیدی:
- AWS Emulator بیش از ۲۰۰ سرویس AWS رو از روی بیش از ۴۰۰ مدل API شبیهسازی میکنه
- کل کدش رو ایجنتها نوشتن و با AWS واقعی تست کردن
- کد با لایسنس CC0 روی GitHub منتشر شده و پوشه things-that-do-not-work تفاوتها با AWS واقعی رو لیست میکنه
- اولین نسخه امولاتور SQS با یه پرامپت به Kiro حدود ۱۵ دقیقه ساخته شد
- بازسازی موتور replication سرویس Alf با spec و محیط تست، از چهار ماه به حدود دو ساعت رسید




