Les principaux benchmarks mesurent ce que l’IA peut faire. Aucun ne mesure si cela fait ce que vous voulez dire : la distance entre ce que vous demandez à une IA de faire et les hypothèses tacites sur la façon dont vous voulez que l'IA le fasse. Nous proposons une nouvelle métrique…
Les nouveaux modèles repoussent les limites des capacités et du rapport qualité-prix. Les équipes réévaluent les éléments sur lesquels s'appuyer chaque fois qu'un lancement modifie ce qui est possible par dollar.
Les résumés sont regroupés à titre d’information uniquement – suivez le lien source pour l’histoire complète. Les entrées de démonstration sont illustratives.