Bagan tunggal yang penting saat memilih model: seberapa besar kecerdasan terukur yang Anda peroleh untuk setiap dolar. Kami memplot harga token campuran terhadap LMArena Elo asli dan menelusuri batas efisien — model yang kualitasnya tidak ada duanya dengan harga lebih rendah.
Kualitas adalah LMArena Elo yang nyata - peringkat preferensi manusia dari pemungutan suara secara langsung, bukan perkiraan kami sendiri. Harga adalah rata-rata campuran token input dan output $/1 juta dari harga yang dilacak setiap model.
Suatu model berada pada batas efisien ketika tidak ada model lain yang mempunyai Elo lebih tinggi dan harga lebih rendah atau sama. Perbatasan dihitung ulang seiring dengan pembaruan harga dan peringkat.
Kami sengaja tidak mempublikasikan rasio 'Elo per dolar': Elo adalah skala interval, jadi membaginya dengan harga tidak berarti secara statistik. Perbatasan adalah cara jujur untuk membandingkan kualitas dengan biaya.