Nieuws

HELMeer flexibiliteit met Unitxt-integratie

Het HELM-kader voor het beoordelen van taalmodellen krijgt via de integratie met Unitxt van IBM Research extra flexibiliteit en meer benchmarks. De integratie biedt toegang tot meer dan 24 NLP-taken, 400 datasets en 80 metrieken, waardoor gebruikers eenvoudiger aangepaste evaluatiestromen kunnen maken. Unitxt ondersteunt ook het voorbereiden van gestructureerde datasets, zoals tabellen en chatgesprekken, wat HELM tot nu toe ontbrak.