e18e بنچمارک مشترک متافریمورکها رو راه انداخت
خلاصهٔ کاملتر
جامعهٔ e18e پروژهای به اسم Framework Performance رو منتشر کرده؛ مجموعهای از بنچمارکها برای سنجیدن کارایی متافریمورکها (یعنی فریمورکهایی مثل Next.js که روی یه کتابخونهٔ UI سوار میشن و routing، رندر سمت سرور و build رو هم میدن). نسخهٔ اول Nuxt، Next.js، TanStack Start، Solid Start، Solid 2.0، Astro، SvelteKit، React Router و Pracht رو پوشش میده.
به گفتهٔ تیم، مشکل اصلی این بود که هر فریمورک کارایی رو به شیوهٔ خودش میسنجه و طبیعتاً سراغ جایی میره که توش قویه. بعضی روی رندر سمت سرور تمرکز دارن و بعضی روی رندر سمت کلاینت، پس مقایسهشون مثل مقایسهٔ سیب با سفینهست. برای همین نویسنده معتقده یه عدد ساده کافی نیست و چند معیار لازمه. هر نسخهٔ major و minor هم ثبت میشه تا روند پیشرفت هر فریمورک دیده بشه.
تستها دو دستهان. DevTime هزینههای موقع توسعه رو میسنجه: تعداد وابستگیها، حجم node_modules، زمان نصب و build، زمان بالا اومدن dev server، polyfillهای Core-JS و حداقل نسخهٔ Node. اینجا از پروژهٔ پیشفرض CLI هر فریمورک استفاده میشه. RunTime ولی یه اپ یکسان رو تو همه میسازه و معیارهایی مثل FCP و INP با Lighthouse، حجم بارگذاری اولیه و throughput و latency رندر سمت سرور زیر بار رو میسنجه. هر تست چند بار روی زیرساخت Depot اجرا میشه و min، max، median و واریانس ثبت میشه.
دادههای واقعی از HTTP Archive هم اضافه شده تا Core Web Vitals سایتهای واقعی رو جدا برای دسکتاپ و موبایل نشون بده. نویسنده هشدار میده این دادهها هم کامل نیستن، چون فریمورک کنترلی روی هاستینگ و نحوهٔ استفاده نداره و حجم نمونه هم اثر داره؛ مثلاً Solid امتیاز خیلی خوبی گرفته ولی از تعداد سایت خیلی کمتر.
پروژه همین حالا اثر واقعی داشته. موقع منصفانه کردن تست بار SSR معلوم شد کامپوننتهای Link خود فریمورکها کارایی رو پایین میارن و Daniel Roe از همین برای بهتر کردن لینکها تو Vue و Nuxt استفاده کرد. تو Nuxt رندر لینکهای داخلی حدود ۵۸٪ سریعتر شده، parse کردن payload مربوط به RSC تو React حدود ۷۵٪ سریعتر شده، و سه اصلاح تو Solid 2.0 تست بار SSR رو از ۱۷۰ به ۲۸۰ درخواست در ثانیه با یه اتصال رسونده. تیم از هر نقدی روی منصفانه بودن تستها استقبال میکنه.
نکات کلیدی:
- نسخهٔ اول ۹ متافریمورک رو با تستهای یکسان مقایسه میکنه
- بنچمارکها به DevTime (وابستگی، build، dev server) و RunTime (Lighthouse، throughput سمت سرور) تقسیم شدن
- هر تست RunTime چند بار روی Depot اجرا و median و واریانسش ثبت میشه
- رندر لینکهای داخلی Nuxt حدود ۵۸٪ و parse کردن payload مربوط به RSC حدود ۷۵٪ سریعتر شده
- Solid 2.0 تو تست بار SSR از ۱۷۰ به ۲۸۰ درخواست در ثانیه رسیده
- دادههای واقعی Core Web Vitals از HTTP Archive هم اضافه شده




