Data engineer (2x) - ministerie van buitenlandse zaken

Je speelt een centrale rol binnen het Business Intelligence Team van BZ.

Buitenlandse zaken heeft de ambitie door te groeien naar een informatie gestuurde, data-gedreven organisatie. Om dit te verwezenlijken loopt een diversiteit aan business intelligence & analytics (BIA) en data science projecten die grotendeels in elkaar verweven zijn. Ontwikkeling en beheer worden uitgevoerd door twee ontwikkel- en beheerteams onder aansturing van twee projectleiders.

De verschillende agile-scrum teams werken nauw samen met producteigenaren en opdrachtgevers vanuit verschillende afdelingen. Verschillende stakeholders, verschillende belangen, allemaal met als doel steeds beter en meer informatiegestuurd te kunnen werken voor een steeds grotere gebruikersgroep.

Je activiteiten gaan zich richten op het doorontwikkelen van het datawarehouse op basis van het Databricks platform. Uitgebreide kennis van python en sql is hiervoor van belang.

De volgende taken en resultaatgebieden worden onderkend

Ontwikkelt, onderhoudt en optimaliseert datapipelines voor specifieke informatieproducten.
Hiervoor wordt het Databricks platform gebruikt.
Ondersteunt, adviseert en stemt af met data analisten, infra engineer, visualisten, datascientists en BI-consultant (en informatiemanagers) betreffende informatieplanning en informatiestrategie
Werkt nauw samen met BI-consultants, datagebruikers, datascientists e.a. op in de hiervoor genoemde technieken, zodat ze in staat zijn om de data die ze nodig hebben te integreren en te gebruiken
Draagt er zorg voor dat de workloads gemanaged (deployment via devops pipelines) naar ontwikkeling en productie worden gebracht. Dit proces wordt door de data-engineer continu doorontwikkeld
De Data-engineer is verantwoordelijk voor het monitoren en signaleren van de meest recente ontwikkelingen van innovatieve en moderne tools, technieken en architectuur voor data-ontwikkeling en beheer
De data-engineer draagt zorg voor het zoveel mogelijk geheel of gedeeltelijk automatiseren van de laad- en verwerkingsprocessen
Draagt er samen met o.a. de datasteward zorg voor dat compliance-eisen en datagovernance worden verwerkt in de technische oplossing, zodat
gebruikers (BI-consultants, data-scientists, datagebruikers) de data op een verantwoorde manier gebruiken
Denkt onafhankelijk en zet technologische kennis in om verschillende concepten te integreren zodat unieke oplossingen ontstaan (Innoveren)
Als Data Engineer weet je als geen ander dat de opkomst van informatie gestuurd werken onvermijdelijk is.

Data is overal om ons heen. Het toepassen van data kan BZ efficiënter en slimmer maken. Het doel van het Data Competence Centre is om (big)data (intern/extern, gestructureerd/ongestructureerd) te verzamelen en deze zodanig te rangschikken dat de data kan worden toegepast om tot inzichten te komen ter ondersteuning van de processen van BZ. Voor de ontwikkeling hiervan is een business intelligence & analytics en data science team ingericht. Je komt te werken in een multidisciplinair scrumteam voor de business intelligence producten o.a. bestaande uit data analisten, ontwikkelaars en business vertegenwoordigers. In samenwerking met vertegenwoordigers van diverse directies wordt gewerkt aan het gestructureerd ontsluiten van de belangrijkste systemen van BZ en het onderbrengen van deze gegevens in een enterprise data warehouse en bijbehorende analytische omgevingen. Voor de facilitering van dit team is BZ op zoek naar een bevlogen Senior Data engineer met relevante ervaring op het Microsoft Azure platform.

… lees de volledige omschrijving bij Freep.