بالاخره نتایج تست جدید «JevBench» که اولین محک درستودرمون واسه ارزیابی مدلهای کلاس Jev به حساب میاد، از تنور دراومد و جدول رقابت رو حسابی تکون داد

بالاخره نتایج تست جدید «JevBench» که اولین محک درستودرمون واسه ارزیابی مدلهای کلاس Jev به حساب میاد، از تنور دراومد و جدول رقابت رو حسابی تکون داد. تو این کارزار، مدل اصلی Jev از تیم typesafeai با امتیاز ۷۵.۳ هنوز پرچمش بالاست و تو صدر جدول جا خوش کرده، ولی فاصلهش اصلاً حاشیه امنی نیست. درست پشت سرش، مدل SemIf با نمره ۷۴.۶ سفتوسخت چسبیده به دمش و حسابی داره تو رتبه دوم براش خطونشون میکشه. خلاصه رقابت اونقدر پایاپای و میلیمتری شده که اگه مدل اولی یه لحظه غفلت کنه، بعید نیست تاج و تخت رو دودستی تقدیم رقیب کنه.
منبع
Florian S@airesearch12
JevBench results are in.
Jev still in the lead, but it's close.
Florian S @airesearch12
Introducing JevBench.
The first benchmark for Jev class models.
Original Jev by @typesafeai in the lead at 75.3.
SemIf #2 at 74.6.
All results at https://benchmarkheaven.com/jev-models
۲۸ شهریور ۱۴۰۵مشاهده در X
نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.