Data engineer migratie (datalab)

Voor onze klant Volksgezondheid, Welzijn en Sport Kerndepartement zijn wij op zoek naar een Data engineer migratie (datalab).

Je ontwerpt en implementeert ETL/ELT-processen die data van bron tot productielaag in het data lake brengen met Python en PySpark, en je ontwerpt en onderhoudt de centrale semantische modellen, zodat datastructuren en definities op elkaar aansluiten en er stabiele Power BI-rapportages op gebouwd kunnen worden. Je onderhoudt het Azure dataplatform samen met de beheerpartij van de cloudomgeving en bent daarvoor het aanspreekpunt. Je bent binnen het team het aanspreekpunt voor de moeilijkste datatransformaties en schema-updates, denkt mee over de aanpak van de doorontwikkeling en nieuwe initiatieven, en verkent actief hoe AI kan bijdragen aan het verlagen van de werklast bij de operationele teams.

Kennis, ervaring, competenties en vaardigheden

Voor deze opdracht zoeken we een ervaren data engineer die:

Het Datalab van VWS is de omgeving waarin de directies van VWS hun data-initiatieven kunnen onderbrengen. Het platform is gebouwd op Microsoft Azure met Databricks als centrale component. Voor het onderhoud van de bestaande omgeving en voor een aantal aanstaande ontwikkelingen, waaronder de migratie naar een vernieuwd platform en het via API ontsluiten van bronsystemen, zoeken wij een ervaren data engineer. De data engineer is binnen het team de technische ruggengraat voor de complexere datavraagstukken.

Opdrachtgever

Nederland gezond en wel. Dat is het motto van het ministerie van Volksgezondheid, Welzijn en Sport (VWS). Zorg voor ouderen en jongeren en voor mensen met een lichamelijke of verstandelijke handicap. De directie Organisatie, Bedrijfsvoering en Personeel (OBP) is eindverantwoordelijk voor de levering van bedrijfsvoeringdiensten aan het kerndepartement en aan een aantal niet tot de kern behorende diensten van VWS. Binnen OBP/Afdeling IV is het VWS Datalab belegd. Het Datalab beheert en ontwikkelt het Azure dataplatform waarop de directies van VWS hun data-initiatieven onderbrengen, en levert daarmee de basis voor data-analyses, rapportages en datagedreven werken binnen het departement.

Ministerie van Volksgezondheid, Welzijn en Sport

VWS werkt aan een gezond, fit en veerkrachtig Nederland. Ruim 6.700 mensen zetten zich in voor goede en betaalbare zorg en ondersteuning, een gezonde levensstijl, voldoende beweging, (top)sportvoorzieningen en goede voeding. Ons werk is betekenisvol, wat maakt dat onze mensen hun baan écht leuk vinden. Dat zorgt voor een goede sfeer, waarbij je vrijheid hebt in je werk. We willen dat iedereen wordt gezien, gehoord en gewaardeerd in een veilige werkomgeving.

Het werk is nooit saai, want we moeten voortdurend vernieuwen en met oplossingen komen. Hierbij denken we niet alleen vanuit onszelf. We luisteren ook goed naar de mening van anderen. We vinden het daarom belangrijk dat jij jezelf kunt zijn en je mening durft te geven. Zo leren we van elkaar. Want we kunnen het niet alleen. We werken daarom samen met partners, andere ministeries, professionals uit de zorg en natuurlijk inwoners van Nederland.

Bij het beleidsdepartement van VWS werken ruim 2.000 mensen. Daarnaast werken nog eens 4.700 mensen bij de concernpartners van VWS. Zoals het Rijksinstituut voor Volksgezondheid en Milieu (RIVM), de Nederlandse Sportraad en de Inspectie Gezondheidszorg en Jeugd (IGJ). Ook zijn we verantwoordelijk voor een aantal zelfstandige bestuursorganen. Zoals het Zorginstituut, de Dopingautoriteit en het College Beoordeling Geneesmiddelen.

Eisen

• Minimaal 3 jaar aantoonbare werkervaring heeft als data engineer op Microsoft Azure

• Aantoonbare ervaring heeft met Databricks (onder meer Delta Lake en Unity Catalog)

• uitstekende programmeervaardigheden heeft in Python en aantoonbare ervaring met PySpark

• Minimaal 3 jaar ervaring heeft met het opzetten van ETL/ELT-processen en het bouwen en orkestreren van pipelines

• Minimaal 3 jaar ervaring heeft met datamodellering, conceptueel en dimensioneel, en met het ontwerpen en onderhouden van semantische modellen

• Aantoonbare ervaring heeft met API-integraties en het ontsluiten van bronsystemen

• Aantoonbare ervaring heeft met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)

• In het bezit is van een of meer relevante Azure datacertificeringen (de DP reeks binnen de azure certificaten)

• Ervaring heeft met platformmigraties, van on-premises of legacy naar een cloud dataplatform, is een pre

• Minimaal 5 jaar aantoonbare ervaring heeft met het werken in een agile omgeving

• Minimaal 32 uur per week beschikbaar is

• HBO/WO werk- en denkniveau heeft in een bèta- of ICT-richting, analytisch denkt en nauwkeurig werkt

• De Nederlandse taal in woord en geschrift beheerst, klantgericht en organisatiesensitief is, goed samenwerkt in teamverband en zich goed kan verplaatsen in de gebruikers.

• Kandidaat beschikt over minimaal HBO werk- en denkniveau (kan worden aangetoond dmv een afgeronde HBO opleiding en/of aantoonbare werkervaring van minimaal 3 jaar op HBO niveau)

• Kandidaat beschikt over minimaal 3 jaar aantoonbare werkervaring als data engineer op Microsoft Azure

• Kandidaat beschikt over aantoonbare kennis van en ervaring met Databricks, Python en PySpark

• Kandidaat beschikt over aantoonbaar minimaal 3 jaar kennis van en ervaring met datamodellering, ETL-processen en het bouwen van pipelines

• Kandidaat is minimaal 32 uur per week beschikbaar voor de duur van de opdracht

Wensen en pré's

• Mate waarin de kandidaat ervaring heeft met het werken in agile teams
• Mate waarin de kandidaat kennis heeft van het Azure dataplatform (Databricks, Delta Lake, Unity Catalog, Azure Data Factory, ADLS) en ervaring heeft met platformmigraties
• Mate waarin de kandidaat kennis heeft van datamodellering en semantische modellen, het opzetten van ETL/ELT-processen en het bouwen van pipelines met Python en PySpark, inclusief API-integraties
• Mate waarin de kandidaat beschikt over relevante certificeringen vanuit de DP reeks en aantoonbare ervaring met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)
• Mate waarin kandidaat beschikt over de gevraagde competenties en vaardigheden (toetsbaar in CV, motivatie en/of mogelijk gesprek)

Een opdracht via Greenlights betekent persoonlijke begeleiding en een team dat je inhoudelijk kent. De precieze voorwaarden bespreken we in het kennismakingsgesprek.

• Een Nederlands CV (max 5 pagina's) in word formaat (inclusief voorletters, woonplaats, geboortedatum)
• Persoonlijke motivatie gericht op het functieprofiel
• Beschikbaarheid en geplande vakanties
• Deze functie is niet geschikt voor zzp’ers en daarom ontvangen wij graag CV’s van medewerkers die in loondienst zijn van een bedrijf waar zij geen eigenaar van zijn.