Data Engineer - Den Haag, Nederland - Yacht

Beschrijving

Het Ministerie van Buitenlandse Zaken is de spil in de communicatie tussen de Nederlandse regering en de regeringen van andere landen én tussen de Nederlandse regering en internationale organisaties. Het ministerie coördineert het buitenlandbeleid van de Nederlandse regering en voert dit uit. BZ steunt 24/7 Nederlanders in het buitenland. Naast het departement in Den Haag opereert het ministerie vanuit ca. 160 ambassades, permanente vertegenwoordigingen en consulaten(-generaal), verspreid over de hele wereld.

HDCV heeft een eigen BI-team van data analisten, data scientists en een data steward. Je bent onderdeel van het BI-team en werkt er veel mee samen. Tevens heb je veel contact met DCVafdelingen en het Data Competence Centre (DCC) van de directie Informatievoorziening en Digitale Innovatie (IDI) die de ontwikkeling van informatiegestuurd werken bij BZ faciliteert.
Jouw werkzaamheden:
- Het inrichten en beheren van data pipelines
- Het operationaliseren van End2End pipeline van ruwe data tot gevormde data voor downstream applicaties
- Het beheren en optimaliseren van een datalake en datawarehouse
- Het beschikbaar maken en toegankelijk houden van OTAP omgevingen;
- Het integreren van datamanagement-technologieën en software engineering tools;
- Het ontsluiten van een geautomatiseerd self-service platform voor ondersteunende tools;
- Het initiëren van vernieuwingen op het gebied van devops engineering en hierover adviseren.

De directie Consulaire Zaken en Visumbeleid heeft behoefte aan een dedicated data-engineer die zorgt voor een stabiele data omgeving door het aansluiten en integreren van DCV bronnen zoals het visumaanvraagsysteem, de short/fast track screeningsapplicatie van visumaanvragen, het belsysteem van Nederland Wereldwijd, de BZ Reisapp en het consulaire bijstandssysteem in de DCV analyse omgeving. Het doel is om data (intern/extern, gestructureerd/ongestructureerd) te verzamelen en zodanig te rangschikken dat DCV de data kan toepassen om tot nieuwe inzichten te komen ter ondersteuning van de consulaire processen.

De perfecte kandidaat voldoet aan de volgende eisen:

• Havo diploma
• minimaal 2 jaar werkervaring met big data technologieën (Spark / Databricks, Azure HDInsight, Hadoop o.i.d.)
• ervaring met het in productie nemen van data en machine learning pipelines, en distribueren van de resultaten ervaring met het binnenhalen, opslaan en verwerken van zowel gestructureerde data als nietgestructureerde data
• ervaring met CI/CD methodologie, met Azure tools zoals Azure Devops, Data Factory en vergelijkbaar
  ervaring met cloud services, ervaring met visualisatieprogramma's (zoals Tableau)

En de volgende wensen:

• Engels: Lezen B2, schrijven B2, spreken: interactie (gesprek) B2
• Bij voorkeur heb je ervaring als data scientist om als achtervang werkzaamheden te kunnen overnemen indien nodig. Interesse in en kennis van de nieuwste technologieën op het gebied van data engineer, data science en data warehousing

Het ministerie voert een actief diversiteitsbeleid en zet in op een inclusieve organisatie. We doen dit door de verschillen van mensen optimaal in te zetten en te benutten. We streven bij de samenstelling van teams en bij de aanname van nieuw talent naar diversiteit in leeftijd, geslacht, cultuur, achtergrond, geaardheid, kennis en competenties.

Deze opdracht is uitsluitend voor detachering