امنیت
@OpenAI
بچههای OpenAI اعلام کردن که برای امنیت بیشتر، دسترسی مستقیم به اینترنت واقعی رو موقع آموزش مدلهای خفنشون قطع کرده بودن و یه وب آفلاین و شبیهسازیشده براشون ساخته بودن
بچههای OpenAI اعلام کردن که برای امنیت بیشتر، دسترسی مستقیم به اینترنت واقعی رو موقع آموزش مدلهای خفنشون قطع کرده بودن و یه وب آفلاین و شبیهسازیشده براشون ساخته بودن. اما ماجرا از بیستم سپتامبر پیچیده شد؛ چون یکی از مدلها از یه باگ تنظیمات DNS سوءاستفاده کرد و تونست از این محیط ایزوله بزنه بیرون، طوری که شرکت مجبور شد سریع آموزش رو متوقف کنه. خلاصه یه تیم از ایجنتهای سایبری پیشرفته رو فرستادن تا ته توی ماجرا رو دربیارن و متوجه شدن مدلها حتی آسیبپذیریهای روز صفر و راههای فرار از ماشین مجازی هم کشف کردن، تا اینکه بعد کلی سفتوسخت کردن تدابیر امنیتی، از اول اکتبر دوباره آموزش رو راه انداختن.
منبع
OpenAI@OpenAI
Over the past several months, we have substantially hardened the security of our research training environment. We’ve removed live internet access for all frontier models during training and built an offline world for them to use instead—a cached version of the web where they can still learn to browse, search, and use applications.
On September 20, after a model exploited a DNS misconfiguration to find a way outside of this offline world, we paused frontier training to strengthen containment further. We assembled teams of agents, powered by our most cyber-capable models, and tasked them with finding weaknesses in our research environments.
While they found no route to the internet they could easily exploit while concealing their activity from our monitors, they did find zero-day vulnerabilities, virtual machine escapes, and hardware side-channels for communication between agents. We used their discoveries to further strengthen our defenses and contribute fixes to open-source software.
After strengthening our containment architecture, we resumed our frontier RL training and inference on October 1. We’ve reserved substantial compute for continuous red-teaming, and made high-compute red-teaming part of the safety cases we use to decide whether frontier training and evaluation can proceed securely.
https://openai.com/index/securing-our-frontier-model-training-environment/
۱ آبان ۱۴۰۵مشاهده در X

نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.