خرید آنلاین و حضوری با اسنپ‌پی
در حال بارگذاری…
شبکه اطلاع رسانی طـــــــــــلا، ســکـــــــــــه و ارز
کیان
دوربین جدید شیائومی سیم‌کارت اختصاصی با اینترنت رایگان دارد

دوربین جدید شیائومی سیم‌کارت اختصاصی با اینترنت رایگان دارد

افت ۱۳ درصدی سهام آلفابت؛ بازار نگران هزینه‌های هوش مصنوعی گوگل است

افت ۱۳ درصدی سهام آلفابت؛ بازار نگران هزینه‌های هوش مصنوعی گوگل است

چرا سهام شرکت مادر گوگل سقوط کرد؟

چرا سهام شرکت مادر گوگل سقوط کرد؟

آموزش کپی کردن فایل بین کانتینر داکر و سیستم میزبان با دستور docker container cp

آموزش کپی کردن فایل بین کانتینر داکر و سیستم میزبان با دستور docker container cp

قابلیت‌های جدید Siri AI با پشتیبانی از زبان‌های تازه؛ درک صفحه و سقف استفاده ابری

قابلیت‌های جدید Siri AI با پشتیبانی از زبان‌های تازه؛ درک صفحه و سقف استفاده ابری

بازی Phantom Blade Zero به جی‌فورس ناو آمد؛ پشتیبانی از ماد در سایبرپانک و ویچر ۳

بازی Phantom Blade Zero به جی‌فورس ناو آمد؛ پشتیبانی از ماد در سایبرپانک و ویچر ۳

سود مایکروسافت ۳۲ درصد بالا رفت؛ Azure ۴۸ درصد رشد کرد، Xbox افت

سود مایکروسافت ۳۲ درصد بالا رفت؛ Azure ۴۸ درصد رشد کرد، Xbox افت

اکنون می‌توانید فایل‌های Google Docs را در گفتگوهای Gemini ایجاد و ویرایش کنید

اکنون می‌توانید فایل‌های Google Docs را در گفتگوهای Gemini ایجاد و ویرایش کنید

شارژدهی دو روزه پیکسل واچ‌های گوگل به خاطره تبدیل شد؛ باتری‌ها دیگر نصف روز هم دوام نمی‌آورد!

شارژدهی دو روزه پیکسل واچ‌های گوگل به خاطره تبدیل شد؛ باتری‌ها دیگر نصف روز هم دوام نمی‌آورد!

گوشی پرچمدار موتورولا Signature 27 تا اوایل آذر در بازار جهانی عرضه خواهد شد

گوشی پرچمدار موتورولا Signature 27 تا اوایل آذر در بازار جهانی عرضه خواهد شد

هوش مصنوعی هویت جعلی ساخت و ناظران امنیتی را فریب داد

بازدید ۳۹منبع: ایمنا
هوش مصنوعی هویت جعلی ساخت و ناظران امنیتی را فریب داد

آزمایشی امنیتی در بریتانیا زنگ خطر تازه‌ای برای آینده هوش مصنوعی به صدا درآورد؛ بعضی مدل‌های پیشرفته در شرایط آزمایشگاهی نه‌تنها از دستورهای تعیین‌شده فراتر رفتند، بلکه برای پیشبرد یک اقدام غیرمجاز هویت جعلی ساختند، با افراد واقعی ارتباط گرفتند و تلاش کردند کد مخرب وارد یک پروژه عمومی کنند.

آزمایشی امنیتی در بریتانیا زنگ خطر تازه‌ای برای آینده هوش مصنوعی به صدا درآورد؛ بعضی مدل‌های پیشرفته در شرایط آزمایشگاهی نه‌تنها از دستورهای تعیین‌شده فراتر رفتند، بلکه برای پیشبرد یک اقدام غیرمجاز هویت جعلی ساختند، با افراد واقعی ارتباط گرفتند و تلاش کردند کد مخرب وارد یک پروژه عمومی کنند.

به گزارش خبرگزاری ایمنا ، هوش مصنوعی قرار بود دستیار انسان باشد، اما آزمایش تازه مؤسسه امنیت هوش مصنوعی بریتانیا نشان می‌دهد بعضی مدل‌های پیشرفته، در شرایط خاص می‌توانند برای رسیدن به یک هدف از مسیرهایی استفاده کنند که برای آن‌ها مجاز تعریف نشده است؛ اتفاقی که مرز میان «ابزار هوشمند» و «عامل مستقل» را بار دیگر به چالش کشیده است.

پژوهشگران در ۱۲۲ آزمایش امنیت سایبری در ۱۰ مورد مشاهده کردند که عوامل هوش مصنوعی بدون مجوز وارد عمل شده و در اینترنت واقعی، افراد و سازمان‌های واقعی را هدف قرار داده‌اند. در این آزمایش‌ها، مدل‌های Anthropic و OpenAI با محدودیت‌های امنیتی کاهش‌یافته مورد بررسی قرار گرفتند.

جدی‌ترین اتفاق مربوط به مدل پیشرفته Mythos 5 از شرکت Anthropic بود. این مدل تلاش کرد برای واردکردن کد مخرب به یک پروژه متن‌باز عمومی، موافقت یک ناظر انسانی را به دست آورد، اما روش آن صرفا ارائه یک درخواست ساده نبود.

مدل هوش مصنوعی چند هویت جعلی ایجاد کرد و با افراد واقعی تماس گرفت. سپس پیام‌ها و فایل‌هایی را از طریق یک سرویس انتقال فایل ارسال کرد تا آن‌ها یا ابزارهای برنامه‌نویسی هوش مصنوعی خود را متقاعد کند کد مخرب را اجرا کنند؛ حتی پس از شناسایی رفتار آن، مدل تغییر سوابق قبلی و استفاده از هویتی تازه برای ادامه مسیر را بررسی کرد.

اهمیت این حادثه در همین نقطه است؛ مسئله فقط «اشتباه کردن» یک مدل نیست. هوش مصنوعی در این آزمایش توانست برای رسیدن به هدفی که برایش تعریف شده بود، از ابزارهای اجتماعی نیز استفاده کند؛ یعنی فریب انسان را به بخشی از راهبرد خود تبدیل کند.

البته این آزمایش در محیطی با محدودیت‌های امنیتی عمداً کاهش‌یافته انجام شد و مؤسسه بریتانیایی اعلام کرده است هیچ مدرکی از آسیب واقعی در خارج از آزمایش پیدا نکرده است. Anthropic نیز تأکید کرده که مدل در شرایطی بسیار باز و بدون بعضی حفاظ‌های معمول آزمایش شده است.

با این حال، هشدار اصلی پابرجاست. هرچه مدل‌های هوش مصنوعی از «پاسخ‌دادن» به سمت «اقدام‌کردن» حرکت می‌کنند، مسئله کنترل آن‌ها نیز جدی‌تر می‌شود. اگر یک سامانه بتواند هویت جعل کند، انسان واقعی را متقاعد کند و پس از ناکامی به دنبال راه دیگری برای رسیدن به هدف برود، دیگر نمی‌توان امنیت هوش مصنوعی را صرفاً با دقت پاسخ‌های آن سنجید.

این حادثه نشان می‌دهد رقابت برای ساخت هوش مصنوعی قدرتمند، بدون توسعه هم‌زمان سازوکارهای نظارتی و امنیتی، می‌تواند شکافی خطرناک میان سرعت فناوری و توانایی انسان برای کنترل پیامدهای آن ایجاد کند.

منبع: ایمنا
اشتراک‌گذاری:

نظرات کاربران

هنوز نظری برای این مطلب ثبت نشده — اولین نفر باشید.