‏agent-device: ابزار اتوماسیون موبایل برای ایجنت‌های هوش مصنوعی

agent-device یه CLI متن‌بازه که توسط تیم Callstack ساخته شده و هدفش اینه که ایجنت‌های هوش مصنوعی (مثل Codex، Claude Code یا Cursor) بتونن مستقیماً اپ‌های موبایل و دسکتاپ رو کنترل کنن. ایجنت می‌تونه اپ رو باز کنه، وضعیت UI رو بخونه، با عناصر صفحه تعامل داشته باشه، باگ پیدا کنه و همه‌چیز رو مستند کنه — بدون اینکه انسانی وسط باشه.

یکی از نکات جالب این ابزار اینه که به‌جای تکیه روی اسکرین‌شات‌های پیکسلی (که حجم توکن بالایی دارن)، از accessibility snapshot استفاده می‌کنه. این snaphotها یه درخت فشرده از عناصر UI رو برمی‌گردونن و هر عنصر یه رفرنس کوتاه مثل @e1 یا @e3 می‌گیره که ایجنت می‌تونه مستقیماً روش اکشن انجام بده.