Nieuws

Benchmarking van RAG-architecturen op een financieel PDF-document – Deel 3: Het meetprobleem

In dit derde deel van een serie over het benchmarken van RAG-architecturen wordt Vision RAG vergeleken met tekst- en graafgebaseerde methoden op een echte financiële PDF. De resultaten tonen aan dat Vision RAG de hoogste antwoordcorrectheid heeft maar laag scoort op faithfulness, terwijl Graph RAG het meest trouw is maar het minst correct. De auteur analyseert waarom twee standaard RAGAS-metrics tegenstrijdige uitkomsten geven en toont aan dat vragen over grafieken alleen door visuele methoden correct beantwoord kunnen worden.