اوپن‌ای‌آی@deredleritt3r

بچه‌های اوپن‌ای‌آی (OpenAI) تازگی‌ها نشونه‌هایی دادن که نشون میده دارن تخته‌گاز به سمت ساخت «پژوهشگر خودکار هوش مصنوعی» پیش می‌رن

بچه‌های اوپن‌ای‌آی (OpenAI) تازگی‌ها نشونه‌هایی دادن که نشون میده دارن تخته‌گاز به سمت ساخت «پژوهشگر خودکار هوش مصنوعی» پیش می‌رن؛ یعنی سیستمی که بتونه خودش بشینه علم هوش مصنوعی رو توسعه بده و وارد فاز خوداصلاحی سریع (RSI) بشه. یاکوب پاچوکی، دانشمند ارشدشون، رک و پوست‌کنده گفته با اینکه دنبال اینن که این هوش روی امنیت و هم‌ترازی خودش هم کار کنه و زیر دست آدمیزاد بمونه، اما هنوز هیچ‌کس در دنیا فرمول امن رد شدن از این پیچ خطرناک رو بلد نیست. از اون طرف هم تأکید کرده که هیچ آزمایشگاهی فعلاً کنترل کامل روی این ماجرا نداره و تا دیر نشده باید دولت‌ها وارد میدون بشن و همه یه ترمز دستی اختیاری بکشن تا چارچوب ایمنی سفت‌وسختی بسته بشه.

منبع

prinz@deredleritt3r
Key take-aways for me from today's OpenAI announcements: - OpenAI "making strong progress" toward creating the automated AI researcher. - Jakub Pachocki: "I have a strong expectation that [OpenAI's] speed of progress could be sustained into RSI". - Automated AI researcher will "work under human supervision". One of OpenAI's "north stars" includes "finding ways for people to remain part of the self-improvement loop". - "An automated AI researcher can also be an automated safety or alignment researcher." One of OpenAI's "north stars" includes "iterating [with the automated AI researcher] on the alignment problem". - Decision on whether to pursue rapid RSI depends on ability to preserve human control and on informed democratic choices about benefits and risks. - OpenAI "do[es] not yet know how to safely get all the way to aligned, full RSI". - OpenAI believes that "we and other companies" should be required to publicly track their progress towards RSI; OpenAI will continue to be transparent about its progress to RSI. - Graphs provided by OpenAI show a very sharp increase in internal usage of Agents around July 2026. I assume that's from Astra? - Jakub Pachocki on scaling laws: "There are new algorithms that have been developed along the way, new feats of ingenuity from teams and individual researchers. I see them largely as discoveries along the path of scaling; the science of deep learning is still nascent, and meaningful algorithmic progress tends to correlate with access to compute." (My note: If the science of deep learning is "still nascent", that has meaningful implications for the speed of progress we should expect from RSI.) - Jakub Pachocki on OpenAI's focus on general models: "We believe we could make the models better at specifically mathematics research with additional focus, but we do not prioritize this direction because of the urgency we feel about RSI and automated alignment research." - Jakub Pachocki on pacing AI development: "Currently I believe that no lab has solved alignment and monitoring to a sufficient degree to continue responsibly scaling at maximum speed for much longer. I expect and hope for voluntary slowdowns to become commonplace until shared safety bars are established. And I believe that international coordination on future AI development needs to become a top priority for governments around the world."
۱۵ شهریور ۱۴۰۵مشاهده در X

نظرها

    بیشتر بخوانید

    تنظیمات

    پیش‌نمایش

    انویدیا از نسل تازه‌ی تراشه‌هایش رونمایی کرد؛ متن خبرها با همین اندازه و فاصله‌ی خطوط نمایش داده می‌شود. ۱۴۰۵ — 2026

    ظاهر و متن

    پوسته
    اندازه‌ی متن
    فاصله‌ی خطوط

    خواندن و نمایش

    نمای فهرست خبرها

    استوری‌ها

    چه خبرهایی پخش شوند
    ترتیب
    دیده‌شده‌هابدون باز کردن تک‌تک خبرها

    صدا

    اعلان‌ها و موضوع‌ها

    موضوع‌هایی که دنبال می‌کنیدهنوز هیچانتخاب موضوع‌ها

    صدای فارسی

    این دستگاه صدای فارسی ندارد. نمونه‌ی صداها را بشنوید و یکی را یک بار دانلود کنید تا خبرها و خلاصه‌ی روز را بشنوید.

    راه‌های دیگر

    ویدیوی خبر

    گفتگو

    … نفر آنلاین

      خواندن کامل