Nieuws

Waarom je taalmodel een dutje nodig heeft

Onderzoekers van Google en Cornell stellen in de paper 'Language Models Need Sleep' dat grote taalmodellen na training geen nieuwe informatie kunnen opslaan, wat zij anterograde amnesie noemen. Ze suggereren dat een slaapachtig mechanisme, geïnspireerd op biologische processen, modellen kan helpen om herinneringen te consolideren.