youtube.com
توی قسمت چهلوپنجم این مجموعه ویدیوی یوتیوب، دست گذاشته روی مبحث خفن «Speculative Decoding» و به زبون فارسی سیر تا پیاز ماجرا رو باز کرده

توی قسمت چهلوپنجم این مجموعه ویدیوی یوتیوب، دست گذاشته روی مبحث خفن «Speculative Decoding» و به زبون فارسی سیر تا پیاز ماجرا رو باز کرده. داستان از این قراره که این تکنیک برای موشک کردن سرعت خروجی گرفتن از مدلهای زبانی بزرگه تا کاربر پشت سیستم معطل نمونه. سازوکارش هم اینطوریه که یه مدل فرز و فسقلی اول کلمات رو حدس میزنه و مدل غولپیکر اصلی فقط تأییدشون میکنه تا کار الکی طول نکشه و منابع هدر نره. خلاصه اگه توی باغ هوش مصنوعی و یادگیری ماشین باشی، این آموزش قلقهای خیلی نابی برای بهینهسازی سیستم بهت میده.
منبع
YouTube
45. Speculative Decoding [Persian]
Enjoy the videos and music you love, upload original content, and share it all with friends, family, and the world on YouTube.
خواندن در سایت منبع
نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.