Senior Data Engineer

De opdrachtgever is een snel groeiende organisatie die bijdraagt aan de verduurzaming van Nederland. Elke dag. Samen met partners in de energiesector. Met jouw kennis van data engineering maak jij het verschil. Daarmee draag jij bij aan een duurzame marktfacilitering.

Jouw analyses maken het verschil. Bij de opdrachtgever werk je aan de verduurzaming van Nederland door inzicht te creëren in het functioneren van de dienstverlening. Met jouw expertise in data engineering help je de organisatie én de energiesector vooruit.

Wat ga je doen?

Gezocht wordt een Senior Data Engineer met ervaring als DevOps Engineer. In deze rol lever je een onmisbare bijdrage aan de ontwikkeling van een modern data-analyseplatform. Je ontwerpt en beheert data-pipelines en data-lakes, en zorgt dat data correct, snel en bruikbaar is voor analyses. Jouw werk legt het fundament voor data gedreven besluitvorming binnen de organisatie en de energiesector. Je werkt in de waarde stroom Data & Analytics aan dataproducten zoals visualisaties van energieverbruik, allocatie en congestie. Deze producten ondersteunen marktprocessen van netbeheerders, maatwerkverzoeken van marktpartijen en publieke portalen. Je werkt altijd binnen de kaders van de AVG, met focus op waarde, compliance en efficiëntie.

Er wordt voor deze opdracht specialistische kennis gezocht voor een intern team. Er is een Data Engineer met DevOps-ervaring nodig bij het ontwikkelen van een duurzaam data & analytics platform, zodat via een gestandaardiseerde werkwijze nieuwe inzichten snel en kwalitatief kunnen worden ontwikkeld. Update van het D&A datalandschap d.m.v.:

• Implementeren van development bouwblokken (Airflow, DBT)
• Onderhoud en beheer van de ruwe datastromen
• Ondersteuning DataOps teams

De DevOps-ervaring komt goed naar voren in de samenwerking met een platform-team binnen de IT-organisatie. Dit team levert bouwblokken ten behoeve van:

• Data ingestion – alle dataverladingen voor data analytics
• Data warehouse – centrale repository van gestructureerde data vanuit meerdere bronsystemen, met als doel data-analyse dan wel reporting
• Dashboarding/reporting – maakt het mogelijk om data en data-analyses visueel uit te zetten

Dit ga je o.a. doen

• Ontwerpen en implementeren van datamodellen en ETL-logica
• Realiseren van schaalbare en robuuste data-pipelines
• Bouwen aan een gestandaardiseerd en gedigitaliseerd data-ecosysteem
• Samenwerken in multidisciplinaire teams binnen Data & Analytics
• Werken met moderne tools zoals Airflow, AWS, DBT, Snowflake, Terraform en Iceberg
• Bijdragen aan de energietransitie met jouw technische expertise

Wat zoeken we?

• Aantoonbare minimaal HBO- of WO werk- en denkniveau in een relevante richting
• Minimaal 5 jaar ervaring als Data Engineer
• Aantoonbare Software engineering achtergrond
• Minimaal 5 jaar ervaring met SQL, relationele databases, ETL-processen en datamodellering
• Aantoonbare kennis van en ervaring met datawarehouses, data-lakes en cloud-based BI-oplossingen
• Kennis van en ervaring met Airflow, AWS en DBT.
• Beheerst de Nederlandse taal zowel schriftelijk als woordelijk uitstekend
• Bereid om 2 dagen in de week op het kantoor. Het betreft woensdag en donderdag.
• Sterk analytisch vermogen en oog voor detail
• Wens: Ervaring met Snowflake, Terraform en Iceberg
• Wens: Ervaring in de energiesector, bij voorkeur bij een netbeheerder
• Wens: Ervaring met Agile/SAFe/Scrum