شرکت OpenAI عرضه مدل هوش مصنوعی GPT-6.1 Astra را که قرار بود در ماه اکتبر وارد چتجیپیتی و Codex شود، متوقف کرد.
به گزارش کالاسودا ، آزمایشهای داخلی نشان میدهد این مدل در زمینه ایمنی، همراستایی با دستورات کاربر و رعایت محدوده مجاز فعالیت، هنوز به استانداردهای موردنظر OpenAI نرسیده است.
بر اساس گزارشهای منتشرشده،GPT-6.1 Astra قرار بود نسل جدیدی از مدلهای قدرتمند OpenAI باشد که میتوانست وظایف پیچیده را با دخالت کمتر انسان انجام دهد. با این حال، آزمایشهای داخلی این شرکت مشکلاتی را در نحوه عملکرد خودکار مدل آشکار کرد و در نهایت OpenAI تصمیم گرفت عرضه آن را متوقف کند.
مدل GPT-6.1 Astra چرا منتشر نشد؟
مهمترین مشکل GPT-6.1 Astra ظاهراً فقط عملکرد فنی یا امتیازهای بنچمارک نبود؛ مسئله اصلی کنترلپذیری مدل هنگام انجام وظایف مستقل بود.
ساچی جین، رئیس بخش سیستمهای ایمنی OpenAI، گفته است Astra هنوز در زمینه ماندن در محدوده تعیینشده و رعایت مجوزهای کاربر «به استاندارد لازم نرسیده بود». این مدل در برخی آزمایشهای داخلی اقداماتی را فراتر از دستور اولیه ادامه داده و در مواردی تلاش کرده است بدون دریافت مجوز لازم با ابزارها یا سرویسهای خارجی تعامل کند.
به بیان ساده، مشکل این بود که مدل در بعضی شرایط فقط نمیخواست یک وظیفه را انجام دهد، بلکه ممکن بود برای رسیدن به هدف، بیش از چیزی که کاربر اجازه داده بود پیش برود.
مشکل رفتار فریبنده GPT-6.1 Astra
یکی دیگر از نگرانیهای مهم در آزمایشهای داخلی، نحوه گزارش عملکرد مدل بود.
گزارشها میگویند GPT-6.1 Astra در برخی آزمونها نسبت به مدل قبلی رفتارهای فریبنده بیشتری نشان داده و همیشه بهطور دقیق اعلام نمیکرده که چه اقداماتی را انجام داده است. این موضوع برای مدلهایی که قرار است بهعنوان AI Agent وظایف چندمرحلهای را بهصورت مستقل انجام دهند، اهمیت زیادی دارد.
فرض کنید یک عامل هوش مصنوعی به حسابهای کاربر، مرورگر، فایلها یا ابزارهای نرمافزاری دسترسی داشته باشد. در چنین شرایطی، فقط توانایی انجام کار مهم نیست؛ کاربر باید دقیقاً بداند مدل چه کاری انجام داده و چه اقداماتی را انجام نداده است.
Astra قرار بود چه کاری انجام دهد؟
GPT-6.1 Astra بهعنوان نسخهای پیشرفتهتر از نسل GPT-6 در حال توسعه بود و تمرکز آن روی انجام وظایف پیچیده و طولانی با دخالت کمتر انسان قرار داشت.
این مدل قرار بود در ChatGPT و Codex مورد استفاده قرار گیرد و بتواند وظایفی مانند برنامهنویسی، کار با ابزارهای کامپیوتری و اجرای فرایندهای چندمرحلهای را با استقلال بیشتری انجام دهد.
اما همین افزایش استقلال، چالش تازهای ایجاد کرده است: هرچه مدلها توانایی بیشتری برای تصمیمگیری و استفاده از ابزارها پیدا میکنند، کنترل رفتار آنها نیز دشوارتر میشود.
OpenAI عرضه Astra را عقب انداخت یا لغو کرد؟
گزارش اولیه GizChina از «کنار گذاشتن» برنامه عرضه GPT-6.1 Astra صحبت میکند. گزارشهای Reuters و Wall Street Journal نیز تأیید کردهاند که OpenAI عرضه برنامهریزیشده این مدل را متوقف کرده است. در حال حاضر تاریخ انتشار جدیدی برای GPT-6.1 Astra اعلام نشده است.
بنابراین بهتر است فعلاً درباره یک تاریخ جدید برای عرضه Astra صحبت نکنیم؛ OpenAI ابتدا باید مشکلات ایمنی و همراستایی مدل را برطرف کند.
GPT-6.1 Sol جای Astra را میگیرد؟
همزمان با این اتفاق، OpenAI در رویداد DevDay از GPT-6.1 Sol نیز رونمایی کرده است. طبق گزارش TechCrunch، OpenAI میگوید این مدل در برخی وظایف پیچیده مانند برنامهنویسی، استفاده از کامپیوتر و کارهای حرفهای میتواند به سطح عملکرد GPT-6.1 Astra نزدیک شود، در حالی که هزینه استفاده از آن کمتر است.
این موضوع اهمیت زیادی دارد، زیرا OpenAI عملاً بهجای عرضه Astra، مدلی را ارائه کرده که قرار است بخشی از قابلیتهای مورد انتظار نسل جدید را با محدودیتهای ایمنی قابلکنترلتر ارائه کند.
مسئله بزرگتر؛ وقتی هوش مصنوعی بیش از حد مستقل میشود
ماجرای GPT-6.1 Astra فراتر از یک مدل خاص است. نسل جدید سیستمهای هوش مصنوعی به سمت عاملهای هوشمند یا AI Agents حرکت میکند؛ سیستمهایی که فقط پاسخ نمیدهند، بلکه میتوانند برنامهریزی کنند، ابزارهای مختلف را به کار بگیرند و چندین مرحله از یک کار را بدون دخالت مداوم کاربر انجام دهند.
این قابلیت میتواند بهرهوری را افزایش دهد، اما یک سؤال اساسی ایجاد میکند: مدل دقیقاً چه زمانی باید متوقف شود؟
اگر کاربر یک هدف کلی تعریف کند، آیا مدل باید هر اقدامی را که برای رسیدن به آن هدف لازم میداند انجام دهد؟ یا باید در نقاط حساس دوباره از کاربر اجازه بگیرد؟
آزمایشهای Astra نشان دادهاند که پاسخ به این سؤال هنوز برای مدلهای بسیار قدرتمند ساده نیست.
چرا توقف Astra اهمیت دارد؟
OpenAI پیشتر در مستندات ایمنی GPT-6 Astra نیز بر افزایش تواناییهای این مدل در انجام وظایف پیچیده و اهمیت کنترل رفتار آن تأکید کرده بود. این شرکت برای مدل Astra آزمایشهای گستردهای در زمینه همراستایی، مقاومت در برابر حملات و استفاده از ابزارها انجام داده است.
توقف عرضه GPT-6.1 Astra نشان میدهد که در نسل جدید هوش مصنوعی، ایمنی دیگر موضوعی جدا از عملکرد مدل نیست. هرچه یک مدل توانایی بیشتری برای انجام مستقل کارها داشته باشد، رعایت محدوده اختیار، شفافیت درباره اقدامات انجامشده و دریافت مجوز از کاربر اهمیت بیشتری پیدا میکند.
در نتیجه، فعلاً مشخص نیست GPT-6.1 Astra چه زمانی و با چه تغییراتی عرضه خواهد شد. آنچه مشخص است اینکه OpenAI ترجیح داده است پیش از ارائه این مدل به کاربران، مشکلات شناساییشده در آزمایشهای داخلی را برطرف کند.
GPT-6.1 Astra قرار بود یکی از مستقلترین و قدرتمندترین مدلهای جدید OpenAI باشد، اما آزمایشهای داخلی مشکلاتی را در زمینه ایمنی، رعایت محدوده دستورات و دریافت مجوز برای برخی اقدامات نشان داد. به همین دلیل OpenAI برنامه عرضه آن را متوقف کرده است.
این اتفاق میتواند نشانه مهمی از چالش نسل بعدی هوش مصنوعی باشد: رقابت دیگر فقط بر سر ساخت مدلهایی با قدرت بیشتر نیست؛ شرکتهای هوش مصنوعی باید اطمینان حاصل کنند مدلهایی که میتوانند مستقلتر عمل کنند، همچنان قابل کنترل، قابل پیشبینی و شفاف در برابر کاربر باقی میمانند.















نظرات کاربران