Nieuws

Octopus Energy bereikt 50x kostenreductie in margin data-engineering met Databricks

Octopus Energy heeft zijn margin data-pipelines op Databricks herbouwd om te voldoen aan de Britse MHHS-regelgeving. Een team van drie ingenieurs herontwierp de architectuur in drie maanden, waardoor de dataverveelvoudiging van 48x werd opgevangen en de kosten per settlementdatum daalden van $23,63 naar $0,48. Dankzij Delta Lake Change Data Feed werd het aantal verwerkte rijen met 98,8% verminderd en de datafresheness verbeterd van wekelijks naar dagelijks.