Functieomschrijving
Voor Rijksdienst voor Ondernemend Nederland zoeken wij een Data Engineer. Als Azure Data & DevOps Engineer maak je deel uit van het Datamanagement & Platform-team bij het Instituut Mijnbouwschade Groningen (IMG). Je werkt in een team dat data verzamelt en analyses uitvoert voor klanten binnen de IMG-organisatie. Je verwerkt (grote) datavolumes en verschillende dataformaten, verzorgt preprocessing en bouwt betrouwbare data pipelines in Azure Blob Storage, Data Lake, SQL-databases of andere storagevormen. Je richt de Azure DevOps-omgeving in en beheert deze zodat modellen en informatieproducten op gestructureerde en reproduceerbare wijze in productie worden gezet. Je speelt een actieve rol bij het inrichten van data-uitwisseling tussen Azure en de omgeving, in samenwerking met DICTU. Het team werkt volgens agile (Scrum).Werkzaamheden
- Je stemt af met de Azure-architect, data scientists, data-analisten en interne en externe partijen om oplossingen te ontwerpen en te realiseren.
- Je ontwerpt, bouwt en onderhoudt data-pipelines en data storage-oplossingen in Azure.
- Je zorgt voor veilige en efficiënte gegevensuitwisseling met de omgeving en implementeert informatiebeveiligingsmaatregelen.
- Je richt kaders in voor informatieproducten en zet de DevOps-omgeving op voor gestructureerde deployment van modellen en informatieproducten.
- Je verwerkt grote hoeveelheden data en verschillende dataformaten en voert preprocessing uit om datasets productie-klaar te maken.
- Je beheert en automatiseert de Azure DevOps-workflow voor release, monitoring en incidentafhandeling.
- Je werkt samen met DICTU en andere partijen om integratie en uitwisseling tussen Azure en externe systemen te realiseren.
Jouw profiel
- Je hebt aantoonbare ervaring met het verwerken van grote datavolumes en het bouwen van data-pipelines in Azure (Blob Storage, Data Lake, SQL-databases of vergelijkbare storage-oplossingen).
- Je kent Azure DevOps en weet CI/CD-pijplijnen, releaseprocessen en deploymentstrategieën op te zetten en te beheren.
- Je hebt oog voor informatiebeveiliging en ervaring met het implementeren van beveiligings- en toegangscontrols binnen data-omgevingen.
- Je kunt technisch afstemmen met architecten en data scientists en vertaalt functionele eisen naar schaalbare oplossingen.
- Je communiceert duidelijk en effectief, zowel mondeling als schriftelijk, en kunt complexiteit begrijpelijk presenteren aan verschillende stakeholders.
- Je bent tooling-agnostisch, pragmatisch en een echte teamplayer.
Over de opdrachtgever
De opdrachtgever werkt aan een duurzame en economisch sterke samenleving en voert nationale en internationale programma’s uit op thema’s als energietransitie en voedselproductie. Zij ondersteunen organisaties met voorlichting, advies, financiering en samenwerking en zetten data en digitale dienstverlening in om processen te verbeteren. Je komt te werken in een professionele, multidisciplinaire omgeving waar verbinding en samenwerking centraal staan.
Functie eisen
- Je hebt een afgeronde hbo+- of wo-opleiding.
- Je beschikt over de Azure AZ-400-certificering.
Functie wensen
- Je hebt minimaal vier jaar ervaring met het inrichten van Azure DevOps en data-pipelines (deployment by code/CGA), onderbouwd met concrete projecten en een rolbeschrijving in je cv of motivatie
- Je hebt minimaal vier jaar ervaring met SQL en Python, onderbouwd met concrete projecten en een rolbeschrijving in je cv of motivatie
- Het is een pré als je ervaring hebt met GitLab, MLOps, Docker, Kubernetes en/of REST, onderbouwd met concrete projecten en een rolbeschrijving in je cv of motivatie
- Je hebt aantoonbare ervaring bij een uitvoerende overheidsorganisatie
- Je hebt minimaal twee jaar aantoonbare ervaring met Databricks, onderbouwd met concrete projecten en een rolbeschrijving in je cv of motivatie
- Bij voorkeur heb je meerdere certificaten in moderne ontwikkelomgevingen en tooling, bijvoorbeeld in Python, R, SAS Enterprise Guide of SQL
