Les benchmarks existants mesurent le taux de résolution et le rendement/coût des jetons, mais ne punissent pas l'excès de code, ce qui rend une base de code plus difficile à utiliser à long terme. Je voulais mesurer cela car c'est le plus important pour les projets à long terme…
Les pondérations ouvertes relâchent la pression sur les prix fermés et élargissent l'accès, modifiant ainsi le calcul de la construction par rapport à l'achat pour l'ensemble de l'écosystème.
Les résumés sont regroupés à titre d’information uniquement – suivez le lien source pour l’histoire complète. Les entrées de démonstration sont illustratives.