Model kecerdasan buatan Claude Fable 5.2 (Max, Default Fallback) mencatatkan pencapaian tertinggi sejauh ini dengan meraih skor 65 pada Indeks Kecerdasan Artificial Analysis. Model tersebut masuk dalam jajaran terdepan dalam hal kemampuan intelektual, meskipun memiliki karakteristik yang sangat mahal dan lambat.
Performa Kecerdasan dan Kapasitas Token
Perolehan skor 65 tersebut menempatkan model ini jauh di atas rata-rata dibandingkan model lain yang sebanding, di mana median skor berada pada angka 40. Dalam proses evaluasi indeks kecerdasan tersebut, sistem menghasilkan sebanyak 275 juta token, yang menunjukkan tingkat verbositas sangat tinggi jika dibandingkan dengan median 72,8 juta token. Model ini mendukung masukan berupa teks dan gambar, menghasilkan keluaran teks, serta memiliki jendela konteks sebesar 1 juta token.
Analisis Biaya dan Kecepatan Pemrosesan
Dari sisi finansial, model ini mematok tarif sebesar 8,00 dolar Amerika Serikat per 1 juta token masukan dan 40,00 dolar Amerika Serikat per 1 juta token keluaran. Biaya tersebut dikategorikan mahal apabila disandingkan dengan median pasar yang masing-masing berada di angka 2,00 dolar Amerika Serikat untuk masukan dan 10,00 dolar Amerika Serikat untuk keluaran. Secara keseluruhan, rata-rata biaya yang dibutuhkan untuk mengevaluasi model ini pada Indeks Kecerdasan mencapai 26,54 dolar Amerika Serikat per tugas.
Selain tingginya biaya operasional, proses pengerjaan tugas oleh model ini juga memakan waktu yang cukup lama. Dibutuhkan durasi 46,4 menit untuk menyelesaikan setiap tugas pada Indeks Kecerdasan, jauh lebih lambat daripada median model sebanding yang mencatatkan waktu 12,6 menit.
Sumber: Hacker News: Front Page
