Essent

Probleemstelling

Bij Essent NL wordt de noodzaak om meerdere legacy-systemen te migreren naar een cloud-datawarehouse aangestuurd door de strategische stap van de organisatie richting cloudtechnologie-adoptie, verergerd door end-of-life-overwegingen voor verouderde technologieën. Een extra drijfveer is de toewijding aan het implementeren van een data mesh-organisatorische aanpak, die het gebruik van cloudtechnologieën noodzakelijk maakt om gedecentraliseerd dataverbruik tussen teams te ondersteunen.

Dit project heeft als doel een naadloze overgang naar de cloud te realiseren, technologische veroudering aan te pakken en een data mesh-framework te omarmen. Hiermee wordt gezorgd voor betere toegankelijkheid van gegevens, samenwerking en aanpasbaarheid op de lange termijn binnen de hele organisatie.

Bijdragen

Beheer, monitoring en administratie van zowel het Snowflake- als het dbt-platform.
Kennisoverdracht en coaching over het gebruik van nieuwe technologieën binnen het bestaande team.
Verbeter bestaande automatiseringen en implementeer nieuwe automatiseringen om de levertijd voor dataproducten te verkorten.
Nieuwe en verbeterde werkwijzen voor het testen, opnemen en transformeren van gegevens opzetten.
Opname, transformatie en datamodellering ter ondersteuning van rapportage- en datawetenschappelijke behoeften en het creëren van dataproducten.
Ondersteuning en deelname aan pilots en workshops voor nieuwe technologieën en technologische ontwikkelingen (Gen AI).

Invloed

Het vertrouwen van de eindgebruiker in het platform en de oplossing is toegenomen door de robuustheid van de nachtelijke belasting aanzienlijk te vergroten en de implementatieprocessen volwassener te maken.
De opnametijd tot levering voor nieuwe bronnen is 5x korter geworden.
Ondersteunde groei van data-objecten binnen het project tot 1800, waarvan 670 objecten gericht zijn op gebruikers.
De doorlooptijd van de CI/CD-pijplijn is met een factor 6 verkort en er zijn ongeveer 25% van de redundante stappen verwijderd.

"Digital Hive hielp Essent met een kwaliteitsinjectie binnen het Essential Insights-team. Ze brachten een Senior Data Engineer binnen die naadloos integreerde in het team. Daarnaast werd voorgesteld om een junior-collega binnen te halen, wat de mogelijkheden van het team nog verder uitbreidde. Hun gezamenlijke inspanningen hebben aanzienlijke waarde toegevoegd aan onze data-operaties."

Anthony Roes

Essentiële inzichten voor producteigenaren

Resultaat

De voordelen van snellere time-to-delivery voor nieuwe dataobjecten resulteren in zowel snellere levering van bedrijfswaarde als snellere groei van het platform. Beide zijn grote drivers in de adoptie van het platform en het geluk en de perceptie van de eindgebruikers.

Het stroomlijnen van de implementatiecyclus resulteert in het gemakkelijker behalen van leveringsdoelen. Dit zorgt voor innovatietijd, wat de levering van waarde en de snelheid waarmee deze waarde wordt geleverd verder vergroot.