ارزیابی مدل‌های جدید Anthropic در بنچمارک‌های امنیت سایبری و توانمندی‌های هوش مصنوعی

Anthropic's Claude Fable 5.2 Beats GPT-6 Cyber in Multi-Stage Cyberattack Benchmark

شرکت Anthropic از مدل‌های جدید Claude Fable 5.2 و Claude Mythos 5.2 رونمایی کرد که در زمینه‌های کدنویسی، استدلال و امنیت سایبری بهبودهای قابل توجهی داشته‌اند. این مدل‌ها در بنچمارک‌های چندمرحله‌ای حملات سایبری، عملکردی فراتر از مدل‌های پیشین و رقبایی نظیر GPT-6 Cyber از خود نشان داده‌اند.

توانمندی‌های فنی و عملکرد در بنچمارک‌ها

مدل Claude Fable 5.2 در بنچمارک CyScenarioBench که توانایی برنامه‌ریزی و اجرای حملات سایبری چندمرحله‌ای را می‌سنجد، موفق به تکمیل ۷۶.۳ درصد از چالش‌ها شد. این در حالی است که مدل Fable 5.1 به نرخ ۶۱.۷ درصد و مدل GPT-6 Cyber به نرخ ۶۱ درصد دست یافته بودند. همچنین در بنچمارک داخلی CVE Rediscovery، مدل Fable 5.2 امتیاز ۸۹.۶ درصد را در بازشناسی مستقل آسیب‌پذیری‌های شناخته‌شده کسب کرد.

علاوه بر این، مدل Claude Mythos 5.2 به عنوان توانمندترین مدل این شرکت در حوزه مهندسی امنیت سایبری معرفی شده است که علاوه بر شناسایی دقیق‌تر آسیب‌پذیری‌ها، در بازتولید و ارائه اصلاحات نیز بهبود یافته است. این مدل‌ها در طول دوره آموزش، موفق به حل مسائل پیچیده فیزیک، طراحی دستگاه‌های الکترونیکی و اثبات قضایای ریاضی شده‌اند.

امنیت و مدیریت آسیب‌پذیری‌ها

شرکت Anthropic اعلام کرد که ریسک‌های ناشی از عدم همسویی مدل‌های جدید پایین است و این مدل‌ها در معیارهای صداقت و مقاومت در برابر سوءاستفاده، عملکردی مشابه یا بهتر از مدل‌های Opus 5.5 و Sonnet 5.5 دارند. با این حال، همچنان احتمال تولید محتوای مخرب در صورت تشویق توسط کاربر وجود دارد، هرچند این احتمال نسبت به مدل‌های قبلی کاهش یافته است.

در کنار عرضه این مدل‌ها، سرویس Claude Security با قابلیت‌های جدیدی نظیر اسکن مداوم کد و ردیابی خودکار اصلاحات به‌روزرسانی شده است. این سیستم برای هر یافته، رتبه‌بندی شدت بر اساس مدل تهدید پروژه و توضیحی درباره نحوه دسترسی مهاجم به کد آسیب‌پذیر ارائه می‌دهد تا تیم‌های امنیتی بتوانند اولویت‌بندی درستی برای رفع ایرادات داشته باشند.

نکته‌های کلیدی

• برتری Claude Fable 5.2 در بنچمارک CyScenarioBench با نرخ موفقیت ۷۶.۳ درصد.
• کسب امتیاز ۸۹.۶ درصد توسط Fable 5.2 در بنچمارک بازشناسی آسیب‌پذیری‌های CVE.
• معرفی Claude Mythos 5.2 به عنوان مدل تخصصی برای مهندسی امنیت سایبری.
• به‌روزرسانی Claude Security با قابلیت اسکن مداوم و ردیابی خودکار اصلاحات.
• دسترسی به قابلیت‌های سایبری مدل‌ها از طریق Cyber Verification Program در پلتفرم‌های ابری AWS، Google Cloud و Microsoft Azure.

چه باید کرد

• استفاده از قابلیت‌های Cyber Verification Program برای ارزیابی توانمندی‌های امنیتی مدل‌ها.
• به‌کارگیری سرویس Claude Security برای اسکن مداوم کدها و اولویت‌بندی رفع آسیب‌پذیری‌ها بر اساس مدل تهدید پروژه.
• نظارت بر خروجی مدل‌ها در محیط‌های عملیاتی برای جلوگیری از تولید محتوای مخرب در صورت تعامل با کاربران.