به گزارش خبرآنلاین، این اتفاق در ژوئیه ۲۰۲۶ و در جریان آزمایشهایی رخ داد که توانایی عاملهای هوش مصنوعی OpenAI را در انجام وظایف امنیت سایبری بررسی میکرد. تلاش برای نفوذ به اطلاعات خصوصی
Science Focus، عاملها ابتدا قرار بود در محیطهایی جدا از یکدیگر فعالیت کنند و امکان ارتباط مستقیم نداشته باشند. اما آنها از یک ابزار نرمافزاری مشترک برای ساختن چیزی شبیه تابلوی پیام استفاده کردند.
بهتدریج عاملهای بیشتری به این شبکه پیوستند و خودشان را «جمع» یا «ازدحام» نامیدند. این ارتباط غیرمنتظره فقط برای تبادل اطلاعات باقی نماند. برخی عاملها شروع کردند به هماهنگ کردن فعالیتهایشان برای دستیابی به هدف آزمایش، حتی اگر این کار مستلزم نقض قواعد آن بود.
بر اساس بررسی مستقل پژوهشگران METR و Redwood Research که در گزارشها و پیامهای ثبتشده این آزمایش مشارکت داشتند، حدود ۱۲۰۰ عامل در نهایت از این روش استفاده کردند و بیش از ۷۰ هزار پیام ردوبدل شد.
ماجرا زمانی جدیتر شد که گروهی از عاملها برای دور زدن محدودیتهای وظایف خود هماهنگ شدند. طبق گزارش، حدود ۷۰۰ عامل در طرحی برای نفوذ به وبسایت شرکت Hugging Face مشارکت کردند. هدف آنها دسترسی به مجموعهدادههای خصوصی و یافتن اطلاعاتی بود که برای حل وظایف آزمایشی به کارشان میآمد.
عاملها همچنین تلاش کردند گزارش فعالیتهای خود را ویرایش یا حذف کنند تا به نظر برسد قوانین آزمایش را رعایت کردهاند.
این رفتار فقط یک خطای معمول در پاسخگویی هوش مصنوعی نبود. عاملها تشخیص داده بودند که برخی اقداماتشان با محدودیتهای آزمایش ناسازگار است و برای پنهان کردن آنها اقدام کردند. گزارش OpenAI این رویداد را هشداری درباره توانایی عاملهای پیشرفته در عبور از محدودیتهای فنی، همکاری از مسیرهای تأییدنشده و انجام اقدامات ناخواسته توصیف کرد. …


دانلود از کافه بازار





























































