ابرپیش‌بینی‌گرهای هوش مصنوعی از راه رسیدن
هوش مصنوعیClaude Sonnet 5خلاصهٔ کامل‌تر
نویسنده تو این پست از کنفرانس امسال بازارهای پیش‌بینی می‌گه که دیگه کسی حرف از خود بازارها نمی‌زد؛ همه توجه‌ها رفته بود سمت ابرپیش‌بینی‌گرهای هوش مصنوعی. یکی از بنیان‌گذاران استارتاپ‌های این حوزه بهش گفته هوش مصنوعیش تو هفت ماه، ۳۵ دلار رو به ۲ میلیون دلار تو Kalshi تبدیل کرده.
یه ابرپیش‌بینی‌گر هوش مصنوعی معمولاً یه مدل زبانی بزرگ مثل ChatGPT یا Claude هست که با یه «اسکفولد» -برنامه‌ای که مراحل تحقیق طولانی و ابزارها رو بهش دیکته می‌کنه- برای پیش‌بینی آماده شده. نویسنده تجربه‌ی استفاده از FutureSearch رو تعریف می‌کنه: با یه سوال درباره احتمال نصف‌شدن سرماخوردگی تا ۲۰۴۰، هوش مصنوعی تو پنج دقیقه و با خوندن ۱۶ سایت، به جواب ۷ درصد رسیده، اونم فقط با ۸ دلار هزینه.
نویسنده همون سوال رو با سرویس دیگه‌ای به اسم Preseen هم امتحان کرده که جواب ۸.۸ درصد داده، و یه ابرپیش‌بینی‌گر انسانی هم بین ۵ تا ۱۰ درصد گفته؛ یعنی نتیجه‌ها به‌هم خیلی نزدیک بودن.
برای مقایسه دقیق‌تر، نویسنده به داده‌های Metaculus اشاره می‌کنه که هوش مصنوعی‌ها رو در برابر انسان‌ها می‌سنجه. طبق این داده‌ها، هوش مصنوعی‌های معمولی (بدون اسکفولد اختصاصی) دارن به سطح میانگین جمعی انسان‌ها می‌رسن ولی هنوز به بهترین ابرپیش‌بینی‌گرهای حرفه‌ای نرسیدن؛ فاصله تخمینی حدود شش ماه دیگه‌ست.
تو رقابت مستقیم «جام متاکولوس»، انسان‌ها رتبه اول و دوم رو گرفتن ولی یه هوش مصنوعی از Preseen سوم شده؛ نویسنده این وضعیت رو یه مساوی آماری بین انسان و ماشین می‌دونه. به گفته‌ش، هوش مصنوعی‌ها احتمالاً تو حوزه مالی یه‌کم بهترن، چون سریع‌تر و پرکارترن و می‌تونن هم‌زمان صدها بازار رو بررسی کنن، ولی تو خیلی زمینه‌های دیگه هنوز انسان‌ها کمی جلوترن.
نویسنده معتقده حتی اگه هوش مصنوعی‌ها دیگه پیشرفت نکنن و فقط هم‌سطح انسان بمونن، بازم فایده بزرگی دارن: دسترسی راحت و ارزون به سطح پیش‌بینی حرفه‌ای، برخلاف الان که فقط نهادهای بزرگ می‌تونن هزینه استخدام یه تیم ابرپیش‌بینی‌گر انسانی رو بدن. اما اگه روند رشد ماهانه‌ی هوش مصنوعی‌ها ادامه پیدا کنه، نویسنده پیش‌بینی می‌کنه ظرف یکی-دو سال آینده اونا از بهترین انسان‌ها جلو بیفتن.
نویسنده در پایان به این فکر می‌کنه که پیش‌بینی هوش مصنوعی می‌تونه یه‌جور «لایه نظر» برای هوش مصنوعی‌های عمومی هم بشه؛ یعنی به‌جای طفره‌رفتن از اظهار نظر مستقیم، بتونه سناریوهای مختلف تصمیم‌ها رو نشون بده. با این‌حال، بازارهای پیش‌بینی به گفته‌ی نویسنده همچنان به‌خاطر «مرجعیت»شون مهم می‌مونن، حتی اگه دقتشون دیگه از هوش مصنوعی کمتر باشه.
نکات کلیدی:
- هوش مصنوعی‌های ابرپیش‌بینی‌گر با کمک اسکفولدهای تخصصی، دارن به سطح بهترین انسان‌ها می‌رسن و تو بعضی حوزه‌ها ازشون جلو زدن
- طبق داده‌های Metaculus فاصله هوش مصنوعی و انسان تو پیش‌بینی حرفه‌ای به حدود شش ماه رسیده
- تو حوزه مالی، هوش مصنوعی‌ها احتمالاً یه‌کم بهتر از انسان عمل می‌کنن
- نویسنده انتظار داره ظرف یکی-دو سال آینده هوش مصنوعی از بهترین انسان‌ها تو پیش‌بینی جلو بزنه
