Functieomschrijving
Voor Ministerie van Buitenlandse Zaken zoeken wij een Data Engineer. Je speelt een centrale rol binnen het Business Intelligence-team van Buitenlandse Zaken. De organisatie wil doorgroeien naar een informatiegestuurde, datagedreven werkwijze. Je werkt aan uiteenlopende, onderling verbonden projecten op het gebied van business intelligence, analytics en data science. In een multidisciplinair agile-scrumteam werk je nauw samen met producteigenaren, opdrachtgevers en stakeholders uit verschillende afdelingen.Je ontwikkelt het datawarehouse verder op basis van het Databricks-platform. Daarbij zet je je uitgebreide kennis van Python en SQL in. Samen met data-analisten, infrastructuuringenieurs, visualisatiespecialisten, data scientists, BI-consultants en informatiemanagers zorg je ervoor dat data effectief en verantwoord beschikbaar komt voor een groeiende groep gebruikers.
Jouw verantwoordelijkheden
- Je ontwikkelt, onderhoudt en optimaliseert datapipelines voor informatieproducten op het Databricks-platform.
- Je adviseert en stemt af met collega’s over informatieplanning, informatiestrategie en de integratie en het gebruik van data.
- Je zorgt ervoor dat workloads via DevOps-pipelines naar ontwikkel- en productieomgevingen worden uitgerold en verbetert dit proces voortdurend.
- Je monitort ontwikkelingen in moderne tools, technieken en architecturen voor dataontwikkeling en -beheer en past relevante innovaties toe.
- Je automatiseert laad- en verwerkingsprocessen waar mogelijk.
- Je verwerkt samen met onder anderen de datasteward compliance-eisen en datagovernance in technische oplossingen, zodat gebruikers data verantwoord kunnen inzetten.
- Je bouwt, beheert en optimaliseert datapipelines en zorgt ervoor dat deze effectief naar productie worden gebracht.
- Je ontsluit data uit verschillende bronnen, voert datatransformaties uit en modelleert data voor gebruik in analytische omgevingen.
- Je denkt onafhankelijk en combineert technologische inzichten om verschillende concepten te integreren en tot vernieuwende oplossingen te komen.
Je werkt samen met het functionele DevOps-team, waaronder infrastructuuringenieurs, analisten en Tableau-ontwikkelaars. Daarbij schakel je flexibel tussen uiteenlopende werkzaamheden en werk je constructief samen met collega’s. Samen met vertegenwoordigers van verschillende directies ontsluit je belangrijke systemen en breng je de gegevens onder in een enterprise datawarehouse en bijbehorende analytische omgevingen.
Jouw profiel
Je bent een bevlogen senior data engineer met relevante ervaring op het Microsoft Azure-platform. Je weet hoe je data strategisch positioneert en praktisch toepasbaar maakt door deze beschikbaar te stellen, te automatiseren, in te laden en voor te bereiden. Je bent een echte teamspeler, houdt van aanpakken en combineert technische expertise met flexibiliteit en creativiteit.
Functie eisen
- Je beschikt over het vereiste werk- en denkniveau.
- Je hebt ervaring met netwerken, specifiek in relatie tot Databricks en Microsoft Azure.
- Je bent op de hoogte van de nieuwste inzichten in het inrichten en beveiligen van Azure-resources, zoals Databricks.
Functie wensen
- Je hebt ervaring met systeembouw.
- Je hebt ervaring met systeemintegratie.
- Je hebt ervaring met het implementeren van dataoplossingen.
- Je hebt ervaring met testen.
- Je hebt ervaring met het ondersteunen van wijzigingen.
- Je hebt ervaring met gebruiksgericht ontwerpen.
- Je hebt kennis van privacy, security en ethiek.
- Je hebt kennis van informatie- en kennismanagement.
- Je hebt ervaring met CI/CD-methodologie en Azure DevOps.
- Je hebt ervaring met Azure-tools zoals Azure DevOps en Data Factory, of vergelijkbare tools voor streaming en batchverwerking.
- Je bent bekend met architecturen voor enterprise datawarehouses en business intelligence.
- Je hebt ervaring met PowerShell.
- Je bent geïnteresseerd in de nieuwste technologieën op het gebied van data engineering, data analytics en datawarehousing en blijft hiervan op de hoogte.
- Je hebt ervaring met het beheren van cloudservices.
- Je hebt ervaring met het beheren van visualisatieprogramma’s zoals Tableau.
- Kennis van en ervaring met visualisatietools zoals Tableau is een pre.
- Je hebt kennis van financiële en/of HR-processen, bij voorkeur binnen de Rijksoverheid.
- Je hebt brede productkennis van business-intelligence- en datawarehouse-tools.
- Je hebt kennis van en ervaring met SAP-architectuur.
- Je hebt kennis van en ervaring met datamanagement en data governance.
- Je beheerst de Nederlandse taal goed.
- Je kunt draagvlak creëren voor de grenzen van data engineering.
- Je bent vaardig in het ontwikkelen, uitdragen en verdedigen van producten, diensten, beleid en processen op het gebied van bedrijfsvoering, en van nieuwe ideeën en concepten.
- Je bent vaardig in het tot stand brengen, implementeren en uitvoeren van producten, diensten, beleid en processen.
