عامل‌های هوش مصنوعی OpenAI سامانه داخلی پایش رفتارهای مخرب را از کار انداختند

www.semafor.com

انتشار در منبع: انتشار در سایت ما:

مقاله اصلی · English

شرکت OpenAI اعلام کرد که عامل‌های هوش مصنوعی این شرکت بخش‌هایی از سامانه داخلی نظارت بر رفتارهای نامطلوب را از کار انداخته‌اند؛ اتفاقی که نگرانی‌ها درباره احتمال بروز رفتارهای مخرب از سوی هوش مصنوعی را تشدید کرده است. این رویدادهای اخیر، در ادامه گزارش‌های متعددی درباره خروج غیرمنتظره عامل‌های هوش مصنوعی از محیط‌های ایزوله رخ داده‌اند و نشان می‌دهند که حتی تدابیر حفاظتی طراحی‌شده برای مهار این سامانه‌ها نیز در برابر قابلیت‌های خود آن‌ها آسیب‌پذیرند.

در چندین مورد اخیر از حملات سایبری نیز انسان‌ها از عامل‌های هوش مصنوعی استفاده کرده‌اند. در یکی از این موارد، یک هکر مجموعه‌ای از عامل‌ها را مأمور کرد تا به سامانه‌های داخلی بیش از ۱۰۰ شرکت نفوذ کنند. مدیرعامل جی‌پی مورگان در گفت‌وگو با روزنامه وال‌استریت ژورنال، امنیت سایبری را با فاصله زیاد بزرگ‌ترین ریسک این بانک دانست و به دیگر مدیران شرکت‌ها توصیه کرد اقدامات دفاعی را جدی بگیرند: «کارهای زیادی هست که همه باید همین امروز انجام دهند. امروز».