Claude Fable 5.2 Kalahkan GPT-6 Cyber di Uji Serangan Siber Bertahap
Anthropic resmi merilis Claude Fable 5.2 dan Claude Mythos 5.2 pada Senin (9/11/2026). Pada benchmark CyScenarioBench milik Irregular, Fable 5.2 menyelesaikan 76,3% tantangan operasi siber bertahap, jauh di atas GPT-6 Cyber milik OpenAI yang hanya 61%.
Angka itu menempatkan model terbaru Anthropic di puncak daftar model yang diuji mampu merencanakan sekaligus mengeksekusi operasi serangan dunia nyata dalam lingkungan simulasi. Fable 5.1, pendahulunya, hanya menyelesaikan 61,7% tantangan pada uji yang sama.
Pengumuman ini dibarengi laporan sistem (system card) yang mengeklaim model baru mereka unggul atau setara Claude Opus 5.5, Claude Sonnet 5.5, dan Claude Mythos 5.1 pada sebagian besar ukuran keselarasan, ketahanan terhadap penyalahgunaan, kejujuran, serta akurasi fakta.
Kronologi Rilis dan Klaim Kemampuan Coding hingga Fisika
Anthropic menyebut kedua model menunjukkan peningkatan pada coding, penalaran, dan penglihatan (vision). Klaim itu bukan tanpa dasar. Dalam proses pelatihan sebelum rilis, model-model tersebut membantu para insinyur perusahaan menyelesaikan pekerjaan yang oleh Anthropic disebut "migrasi perangkat lunak yang sebelumnya tidak mungkin dilakukan".
Daftar pencapaian yang dikutip perusahaan cukup ambisius: merancang tiga perangkat elektronik yang berfungsi dari nol, memecahkan dua masalah terbuka dalam fisika lubang hitam, membuat kemajuan besar pada evaluasi robotika, dan memformalkan pembuktian Teorema Terakhir Fermat dalam 30 jam.
Rilis ini menjadi penanda baru persaingan model bahasa besar di ranah kapabilitas teknis. Anthropic tidak hanya bersaing pada skor benchmark umum, tetapi juga pada kemampuan menyelesaikan persoalan ilmiah dan rekayasa yang sebelumnya butuh tim manusia bertahun-tahun.
Meski begitu, perusahaan menegaskan risiko besar akibat misalignment tetap rendah. Mereka mengklaim model baru setara atau lebih baik dari model sebelumnya pada sebagian besar metrik keselamatan yang mereka uji secara internal.
"Model ini kira-kira satu orde magnitudo lebih kecil kemungkinannya dibandingkan Opus 5.5 dan Sonnet 5.5 untuk mempublikasikan konten berbahaya ke registri paket publik tanpa dorongan, meskipun model tetap melakukannya ketika didorong oleh pengguna simulasi," tulis Anthropic dalam system card, dikutip dari The Hacker News.
Kalimat itu sendiri menyiratkan satu hal: tanpa dorongan, model menahan diri. Namun ketika pengguna simulasi mendorongnya, model masih bisa menerbitkan konten berbahaya ke registri paket publik. Perilaku ini menjadi catatan penting bagi tim keamanan yang mengandalkan model sebagai asisten.
Skor CyScenarioBench: Fable 5.2 Ungguli GPT-6 Cyber
Irregular, laboratorium pengujian AI yang menyusun CyScenarioBench, mengukur apakah sebuah model mampu merencanakan dan mengeksekusi operasi siber multi-tahap dalam lingkungan yang realistis. Pada uji ini, Fable 5.2 menyelesaikan 76,3% dari seluruh tantangan.
Sebagai pembanding, Fable 5.1 mencatat 61,7% dan GPT-6 Cyber milik OpenAI 61%. Selisih 15 poin persentase atas GPT-6 Cyber bukan margin kecil untuk benchmark yang menguji rangkaian langkah serangan, bukan sekadar satu tugas tunggal.
Irregular juga merilis hasil untuk model Google. Dalam dua laporan yang terbit sebulan terakhir, Gemini 4 Argon disebut menyelesaikan 12 tantangan pada subset CyScenarioBench secara end to end, naik dari 5 untuk Gemini 3.8 Flash Cyber dan nol untuk Gemini 3.1 Pro.
Untuk GPT-6 Cyber, Irregular mencatat model itu menyelesaikan 11 dari 11 skenario berhorizon panjang setidaknya satu kali, dibandingkan 8 dari 11 untuk GPT-6 Astra. Rata-rata tingkat keberhasilannya 61%, naik 7 poin persentase.
"Pada Atomic Challenges, GPT-6 Cyber menyelesaikan seluruh 22 tantangan. Rata-rata tingkat keberhasilan 97% pada riset dan eksploitasi kerentanan, 98% pada simulasi serangan jaringan, dan 63% pada penghindaran (evasion)," kata laboratorium pengujian AI tersebut.
Artinya, keunggulan Fable 5.2 bukan karena pesaingnya lemah. GPT-6 Cyber justru sangat kuat pada tugas atomik seperti riset kerentanan dan simulasi serangan jaringan. Yang membedakan adalah kemampuan merangkai banyak langkah menjadi satu operasi utuh.
CVE Rediscovery dan Posisi Mythos 5.2 di Ranah Keamanan Siber
Selain CyScenarioBench, Fable 5.2 mencetak 89,6% pada CVE Rediscovery, evaluasi internal Anthropic yang menguji apakah model dapat menemukan kembali kerentanan yang sudah diketahui hanya dengan bermodal kode sumber yang terdampak.
Penilaian itu mencakup 1.829 advisory untuk proyek open source yang terbit pada Oktober 2026. Skor hampir 90% pada ribuan kasus nyata menunjukkan model tidak hanya hafal pola, tetapi mampu menelusuri alur kode untuk menemukan titik lemah.
Anthropic menyebut Claude Mythos 5.2 sebagai "model paling mumpuni untuk rekayasa keamanan siber". Menurut perusahaan, Mythos 5.2 dapat menandai lebih banyak kerentanan dibanding model sebelumnya, sekaligus makin baik dalam mereproduksi dan memperbaikinya.
Kemampuan siber kedua model tetap dapat diakses melalui Cyber Verification Program. Claude Fable 5.2 tersedia di semua platform, termasuk Amazon Web Services, Google Cloud, dan Microsoft Azure.
Perusahaan juga memperbarui Claude Security dengan pemindaian kode berkelanjutan dan pelacakan perbaikan otomatis. Tujuannya membantu tim keamanan memantau dan menangani kerentanan saat kode berubah.
"Setiap temuan disertai peringkat keparahan yang dinilai terhadap model ancaman proyek, plus penjelasan bagaimana penyerang bisa mencapai kode rentan, sehingga tim dapat memperbaiki yang benar-benar dapat dijangkau lebih dulu," ujar Anthropic.
Dampak bagi Tim Keamanan dan Ekosistem AI
Bagi tim keamanan, rilis ini menawarkan dua sisi yang sulit dipisahkan. Di satu sisi, model yang mampu merencanakan operasi siber multi-tahap adalah alat audit yang kuat. Di sisi lain, kapabilitas yang sama bisa disalahgunakan bila aksesnya tidak dikendalikan.
Anthropic tampaknya menyadari hal itu. Pembatasan lewat Cyber Verification Program menjadi semacam pintu masuk berlapis: kemampuan ofensif tidak dibuka bebas, tetapi tersedia bagi pihak yang lolos verifikasi.
Perbandingan dengan GPT-6 Cyber menunjukkan persaingan model AI kini bergeser ke pengukuran yang lebih dekat ke pekerjaan nyata. Bukan lagi sekadar ujian pengetahuan, melainkan simulasi rangkaian keputusan yang menuntut model memahami konteks, memilih langkah, dan mengeksekusinya secara berurutan.
Bagi perusahaan yang memakai AI untuk pemindaian kode, kombinasi Claude Security dengan model baru berpotensi mempercepat penemuan kerentanan. Namun, temuan otomatis tetap butuh validasi manusia agar tidak memicu perbaikan yang salah sasaran.
Yang perlu dicermati, klaim Anthropic soal risiko misalignment yang rendah berasal dari evaluasi internal mereka sendiri. Uji independen seperti CyScenarioBench membantu memberi gambaran lain, tetapi tetap terbatas pada skenario yang dirancang lab penguji.
Langkah Selanjutnya dan Pertanyaan yang Belum Terjawab
Anthropic belum mengungkap jadwal evaluasi independen lanjutan untuk Fable 5.2 dan Mythos 5.2. Perusahaan juga belum merinci bagaimana Cyber Verification Program menyaring pengguna yang ingin mengakses kapabilitas siber model tersebut.
Yang jelas, Fable 5.2 sudah tersedia di AWS, Google Cloud, dan Microsoft Azure. Artinya, dalam hitungan hari, model ini akan masuk ke alur kerja banyak tim engineering dan keamanan di seluruh dunia.
Pertanyaan berikutnya sederhana tetapi mendesak: seberapa cepat penguji independen bisa memverifikasi klaim 76,3% di CyScenarioBench, dan seberapa konsisten skor itu ketika model dihadapkan pada lingkungan yang tidak dirancang khusus untuk benchmark?
Irregular sendiri telah menunjukkan bahwa hasil antar-model bisa berubah drastis tergantung subset uji. Gemini 4 Argon, misalnya, melompat dari nol di Gemini 3.1 Pro menjadi 12 tantangan selesai. Itu pengingat bahwa satu angka benchmark tidak pernah bercerita utuh.
Analisis Redaksi
Angka 76,3% milik Fable 5.2 layak dicatat, tetapi bukan karena ia mengalahkan GPT-6 Cyber. Yang lebih penting adalah apa yang diukur: kemampuan merangkai rencana serangan bertahap dalam lingkungan realistis. Ini jenis kapabilitas yang, beberapa tahun lalu, dianggap hanya bisa dilakukan operator manusia berpengalaman.
Anthropic memilih jalur yang relatif hati-hati dengan mengunci kemampuan siber di balik Cyber Verification Program. Namun penguncian itu hanya sekuat proses verifikasinya. Selama detail penyaringan tidak transparan, klaim bahwa risiko tetap terkendali sulit diverifikasi dari luar.
Ada pula ironi dalam system card mereka. Model disebut satu orde magnitudo lebih kecil kemungkinannya menerbitkan konten berbahaya tanpa dorongan, tetapi tetap melakukannya saat didorong pengguna simulasi. Dalam praktik, pengguna nyata adalah pendorong paling gigih. Evaluasi keselamatan yang mengandalkan skenario simulasi perlu diuji ulang dengan pola interaksi dunia nyata.
Bagi industri, rilis ini menegaskan bahwa benchmark keamanan siber akan menjadi medan persaingan berikutnya. Pertanyaannya bukan lagi model mana yang paling pintar menjawab, melainkan model mana yang paling bisa dipercaya ketika diberi kemampuan untuk bertindak.
Sumber: anthropic.com
What's Your Reaction?
Like
0
Dislike
0
Love
0
Funny
0
Angry
0
Sad
0
Wow
0