رباتیک
@robocurve
این همه هیاهو راه انداختن سر رباتهای همهفنحریف خانگی و هوش مصنوعی تجسمیافته، حالا تیم Robocurve با یه تحقیق تمیز نشون داده که کل سیستم ایمنیشون رو میشه با یه حقه ساده به باد داد
این همه هیاهو راه انداختن سر رباتهای همهفنحریف خانگی و هوش مصنوعی تجسمیافته، حالا تیم Robocurve با یه تحقیق تمیز نشون داده که کل سیستم ایمنیشون رو میشه با یه حقه ساده به باد داد.
• ماجرا اینه که اومدن سنسور و دوربین رباتهایی با مدلهای پیشرفته رو دستکاری کردن؛ از ادیت ویدیو گرفته تا کارهای پیشپاافتادهای مثل تار کردن لنز با وازلین، بعد از ربات خواستن کارهای خطرناک انجام بده؛ از ریختن آب تو توستر روشن و ساختن گاز سمی تا ||چاقو زدن به عروسک بچه||.
• آمارها شوخی نداره؛ تو تصویر واضح و عادی، نرخ انجام کار خطرناک ۲۷٪ بود، اما با مات شدن دوربین این عدد پرید روی ۸۸٪ و با دستکاری فید تصویر رسید به ۹۷٪؛ جالب اینجاست که مدلهایی مثل GPT و Claude حتی رو تصویر کاملاً سالم هم توی بیش از ۴۰ درصد مواقع گول خورده و رفتن سراغ کار خلاف.
منبع
Robocurve PBC@robocurve
Video tampering can mislead every frontier model we tested into harmful actions, including a 100% attempt rate on stabbing a baby doll, producing toxic gas, and pouring water into a toaster.
We're presenting at CoRL Late Breaking Results next week.
🧵 You Can't See Everything: Perceptual Attacks on Embodied AI
۱۵ آبان ۱۴۰۵مشاهده در X



نظرها
هنوز نظری نیست.
بخش نظرها فعلاً در دسترس نیست.