NapseflowNapseflow
AccueilContenusÉditionsComprendreActualités
Concept

SWE-bench

Benchmark initial lancé en 2023 par des chercheurs de Princeton et Stanford pour évaluer les capacités des modèles d’IA en ingénierie logicielle. Il a servi de base à une version ultérieure, *SWE-bench Pro*.

Catégorie : Numérique

Articles liés (1)

La foire à la saucisse des benchmarks IA… peut-on leur faire confiance ?

Les benchmarks sur l’IA générative sont largement utilisés par les sociétés, mais veulent-ils dire quelque chose ? Oui, à condition d’avoir l’ensemble des détails et des conditions des tests, qui ne sont que rarement mis en avant. La prudence est donc de mise. Les modèles d’IA générative se succèdent à un rythme important, avec pléthore […]

Lire l'édition complète →
1 mo

Ce contenu a été généré par intelligence artificielle à partir de l'article source. Il peut contenir des erreurs ou imprécisions.