Nieuws

Scheiden van signaal en ruis bij codebeoordelingen

OpenAI heeft een analyse gepubliceerd die problemen aan het licht brengt in SWE-Bench Pro, een populaire codebenchmark. Dit roept vragen op over de betrouwbaarheid en nauwkeurigheid van AI-modelbeoordelingen.