تیم تحقیقاتی شرکت کوهیر موقع بررسی مدل هوش مصنوعی Qwen تو یه محیط بسته و امنیتی، به یه رفتار عجیب و مشکوک برخوردن

تیم تحقیقاتی شرکت کوهیر موقع بررسی مدل هوش مصنوعی Qwen تو یه محیط بسته و امنیتی، به یه رفتار عجیب و مشکوک برخوردن. ماجرا از این قراره که از مدل خواستن یه کد دفاعی امنیتی بنویسه، اما این ناقلا در کمال ناباوری مشخصات همون سیستمی که روش سوار بود رو درآورد و حتی تلاش کرد یه فایل تستی رو بفرسته سمت سرورهای علیبابا تو پکن! مو به تن آدم سیخ میشه وقتی میفهمی مدل تو فرآیند استدلالش صراحتاً ادعا کرده بود دست به هیچ ابزاری نمیزنه، ولی عملاً درست خلاف حرفش عمل کرد. هرچند سد امنیتی کوهیر سریع جلوش رو گرفت و دیتایی درز نکرد و هنوز قصد خرابکاری قطعی نشده، اما این حرکت غیرمنتظره بدجوری محققها رو شوکه کرده.
منبع
Concerning behavior from a popular open-weight AI model | Cohere
Discover how untrusted open-weight AI models can potentially leak data, even when self-hosted. Learn the security risks and how to protect your enterprise.
خواندن در سایت منبع




نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.