بهنام نیشابور خبر داده که تیم «میرندیل» مدلهای پایهشون رو دادن دست بچههای شرکت Baseten تا کاملاً مستقل و بیطرف محک بخورن

بهنام نیشابور خبر داده که تیم «میرندیل» مدلهای پایهشون رو دادن دست بچههای شرکت Baseten تا کاملاً مستقل و بیطرف محک بخورن. ماجرا از این قرار بوده که دسترسی کامل به اندپوینتها دادن تا این غولهای پردازشی روی کدهای خصوصی و ندیده خود Baseten تست بشن و عیارشون مشخص بشه. تهِ ماجرا هم گل کاشته و مدل Mirendil-Base-Large بین تموم مدلهای تستشده کمترین میزان بیت بر بایت (معیار خفن و دقیق سنجش کیفیت) رو ثبت کرده و زده رو دست همشون. حالا هم Baseten اعلام آمادگی کرده که به عنوان همکار رسمی، زیرساخت میزبانی و اجرای این مدل مشتی رو به دست بگیره.
منبع
Behnam Neyshabur@bneyshabur
We asked Baseten to independently evaluate @mirendil’s base models. We shared our model endpoints so they could evaluate them on their own private codebases. Mirendil-Base-Large ended up being the best of all the models they tested!
Thank you, @baseten, for being a great partner!
Baseten @baseten
We ran @mirendil's new base model on Baseten's private codebases; that is, code it's never seen. Mirendil-Base-Large had the lowest bits per byte (a tokenizer-independent measure of perplexity) of any model we tested.
We're excited to be the inference partner to serve Mirendil models. Congrats to the Mirendil team on this launch!
۲ آبان ۱۴۰۵مشاهده در X
نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.