ایجنت@0interestrates

بچه‌های Julius AI دست گذاشتن رو نقطه حساس وال‌استریت و بنچمارکی به اسم DeepFinance دادن بیرون تا ببینن این مدل‌های پرادعا واقعاً عرضه‌ی چرخوندن یه معامله بالای ۱۰۰ میلیون دلاری رو دارن یا فقط بلدن جدول ضرب اکسل تحویل بدن

بچه‌های Julius AI دست گذاشتن رو نقطه حساس وال‌استریت و بنچمارکی به اسم DeepFinance دادن بیرون تا ببینن این مدل‌های پرادعا واقعاً عرضه‌ی چرخوندن یه معامله بالای ۱۰۰ میلیون دلاری رو دارن یا فقط بلدن جدول ضرب اکسل تحویل بدن.

• ۲۱ پرونده سنگین و واقعی از دل معاملات پرایوت اکوئیتی و بانکداری سرمایه‌گذاری، طراحی‌شده توسط کارکشته‌های Evercore و JP Morgan؛ کارهایی که برای یه تحلیل‌گر استخوان‌خردکرده ۲۰ تا ۴۰ ساعت زمان می‌بره.

• نتایج روی زمین: بهترین و شاخ‌ترین مدل تو این آزمون‌ها زورش فقط به نمره ||۵۴.۶|| رسیده و کف جدول هم رو حوالی ۲۰ دست‌وپا می‌زنه؛ یعنی تا منطق و تصمیم‌گیری واقعی فرسنگ‌ها فاصله دارن.

منبع

rahul@0interestrates
Today we're releasing DeepFinance, the first ultra-long horizon benchmark for high finance work. A set of 21 problems that reflect work at top PE and IB firms, DeepFinance is built using real deal data. Problems are constructed by experts with backgrounds from top firms like Evercore, JPM and UBS, and institutions like HBS and Wharton. Problems represent work that would take human professionals 20-40 hours to complete. Can AI really diligence a $100M+ deal? Finance benchmarks today are limited to evaluating agents on QA on financial docs or grading the numerical correctness of simple financial models. However, real world high finance work is full of assumptions and conflicting evidence. We built DeepFinance to realistically evaluate agents on those end-to-end finance workflows. DeepFinance leaderboard: http://juliusresearch.ai/deep-finance
۱۵ آبان ۱۴۰۵مشاهده در X
Julius Research

DeepFinance

An ultra long-horizon benchmark for measuring models on real-world Private Equity and Investment Banking workflows, graded on output, workflow, and judgment.

خواندن در سایت منبع

نظرها

    بیشتر بخوانید

    تنظیمات

    پیش‌نمایش

    انویدیا از نسل تازه‌ی تراشه‌هایش رونمایی کرد؛ متن خبرها با همین اندازه و فاصله‌ی خطوط نمایش داده می‌شود. ۱۴۰۵ — 2026

    ظاهر و متن

    پوسته
    اندازه‌ی متن
    فاصله‌ی خطوط

    خواندن و نمایش

    نمای فهرست خبرها

    استوری‌ها

    چه خبرهایی پخش شوند
    ترتیب
    دیده‌شده‌هابدون باز کردن تک‌تک خبرها

    صدا

    اعلان‌ها و موضوع‌ها

    موضوع‌هایی که دنبال می‌کنیدهنوز هیچانتخاب موضوع‌ها

    صدای فارسی

    این دستگاه صدای فارسی ندارد. نمونه‌ی صداها را بشنوید و یکی را یک بار دانلود کنید تا خبرها و خلاصه‌ی روز را بشنوید.

    راه‌های دیگر

    ویدیوی خبر

    گفتگو

    … نفر آنلاین

      خواندن کامل