ساب‌استک اول شلوغی خواست، حالا اسکنر آورد
هوش مصنوعیClaude Opus 5خلاصهٔ کامل‌تر
دنیس استتسکوف تو Tech Trenches سراغ یه تناقض رفته: ساب‌استک از ۲۰۲۳ به نویسنده‌ها گفت راه رشد اینه که تو Notes زیاد و منظم پست بذارن، و ۲۱ ژوئیهٔ ۲۰۲۶ به خواننده‌ها دکمه‌ای داد که همون پست‌ها رو برای نوشتهٔ ماشین اسکن کنه. اعلامیهٔ کریس بست، مدیرعامل شرکت، اسم «Against Claudefishing» رو داره و اسکن فقط روی متن‌های بالای ۱۰۰ کلمه و از روز راه‌اندازی به بعد کار می‌کنه.
به گفتهٔ نویسنده، کاری که این قابلیت می‌سازه بین دو طرف تقسیم شده: راستی‌آزمایی افتاده گردن خواننده، هربار یک متن؛ و مدیریت اعتبار افتاده گردن نویسنده، به‌شکل دائمی — نوشتن بیانیه تو تنظیمات، تست کردن پیش‌نویس‌ها قبل از انتشار، یا خاموش کردن تشخیص که خودش یه‌جور حکمه. فیدی که این حجم رو توزیع می‌کنه اصلاً بخشی از این نسخه نبوده.
دربارهٔ خود ابزار: مکس اسپرو، بنیان‌گذار Pangram، توضیح داده نسخهٔ ۳.۳ متن رو به قطعه‌های حدود ۱۵۰ تا ۳۵۰ کلمه‌ای می‌شکنه و هر قطعه رو یکجا قضاوت می‌کنه؛ پس عددی که خواننده می‌بینه نسبتی از متن نیست، جمعِ حکم‌های تکه‌تکه‌ست. مرجع «متن انسانی» هم فقط از دادهٔ ۲۰۲۱ و قبل‌تر ساخته شده، یعنی سوال واقعی اینه که این متن شبیه آدمِ قبل از ۲۰۲۱ می‌نویسه یا شبیه یه دستیار مرتب و روان.
شواهد بی‌ثباتی هم کم نیست. فردی دیبور نشون داده یه بخش ۳۰۰ کلمه‌ای از نوشتهٔ قدیمی خودش ۱۰۰ درصد AI خونده شده، در حالی که کل مقالهٔ ۵۰۰۰ کلمه‌ای که همون بخش توشه ۱۰۰ درصد انسانی درومده. یه نویسندهٔ دیگه هم گزارش کرده متن خودش ۷۹ درصد گرفته، ولی بعد از اضافه کردن متن کاملاً ماشینی نمره به ۵۴ درصد افتاده. نویسنده تأکید می‌کنه نشونه‌های ظاهری مثل خط تیره اصلاً چیزی نیست که سیستم دنبالش باشه.
بحث انصاف هم مطرحه: یه مطالعهٔ ۲۰۲۳ روی هفت آشکارساز، نرخ خطای مثبت ۶۱ درصدی روی نویسنده‌های غیربومی انگلیسی گرفت. Pangram جزو اون هفت‌تا نبود و یه پژوهش داوری‌شده روی مقاله‌های بلند ESL ازش خطای مثبتی نگرفت، ولی هیچ‌کس همین تست رو روی پست‌های ۱۵۰ کلمه‌ای فید انجام نداده. حرف آخر نویسنده باریکه: پلتفرم اول وعدهٔ کیفیت داد، بعد دو سال دستورالعمل تواتر منتشر کرد، و وقتی خروجی‌اش رسید ابزاری آورد که نویسنده رو بازرسی می‌کنه و اسم فید رو یک بار هم نمیاره.
نکات کلیدی:
- تشخیص فقط روی متن‌های بالای ۱۰۰ کلمه و از روز راه‌اندازی به بعد کار می‌کنه
- درصدی که نشون داده میشه نسبتی از متن نیست، جمع حکم روی قطعه‌های ۱۵۰ تا ۳۵۰ کلمه‌ایه
- مرجع «متن انسانی» Pangram فقط از دادهٔ ۲۰۲۱ و قبل‌تر ساخته شده
- تو دادهٔ Pangram، ساب‌استک با ۲۱.۹ درصد تمیزترین فید بزرگ بود؛ لینکدین از ۴۰ درصد رد شده
- نگرانی اصلی، بار خطای مثبت روی نویسنده‌های غیربومی انگلیسیه
