Data Engineer

Voor de Nederlandse Voedsel- en Warenautoriteit (NVWA) zoeken we een Senior Data Engineer voor een pilot waarin wordt onderzocht of een open source dataplatform de huidige analyse- en rapportageomgeving kan vervangen. De pilot wordt uitgevoerd aan de hand van een vooraf vastgesteld aantal casussen, die samen de keten van bronontsluiting tot en met ontsluiting naar de business afdekken. De Senior Data Engineer is de inhoudelijke motor van de pilot: hij/zij bouwt de casussen daadwerkelijk en zorgt dat de betrokken ontwikkelaars uit de verschillende teams in staat zijn om zelf mee te bouwen.

De werkzaamheden worden uitgevoerd onder aanwijzing en toezicht van de NVWA, binnen de kaders van het pilotplan en in afstemming met de projectleider. De NVWA werkt aan de vernieuwing van haar datafundament. Onderzocht wordt of een open source, Kubernetes-gebaseerd dataplatform de huidige analyse- en rapportageomgeving functioneel en beheersmatig kan vervangen. Aanleiding zijn de gewenste leveranciersonafhankelijkheid, digitale autonomie en beheersbaarheid van kosten en licenties.

De pilot loopt via een reeks representatieve casussen en wordt uitgevoerd samen met de datateams en DICTU. De uitkomst vormt input voor de besluitvorming over het toekomstige dataplatform van de NVWA. Om de casussen binnen de looptijd van de pilot te kunnen realiseren en de betrokken teams daarin mee te nemen, is aanvullende engineeringcapaciteit op senior niveau nodig.

Eisen: Kandidaat heeft minimaal 10 jaar aantoonbare werkervaring in de IT; minimaal 5 jaar werkervaring als data engineer en met het bouwen en beheren van dataplatformen en datapijplijnen; minimaal 3 jaar werkervaring met gedistribueerde dataverwerking op een modern platform zoals spark/pyspark, databricks, fabric of gelijkwaardig; minimaal 5 jaar aantoonbaar werkervaring met SQL en Python; minimaal 3 jaar aantoonbare werkervaring met CI/CD, versiebeheer en configuratie als code.

Wensen: minimaal een afgeronde HBO opleiding of WO opleiding; aantoonbare werkervaring met het bouwen van dataplatformen en datapijplijnen op schaal, en aantoonbaar vermogen om zich een nieuwe open source stack snel eigen te maken, waaronder Spark, Trino, dbt, Airflow en NiFi; aantoonbaar vermogen om ontwikkelaars uit meerdere teams mee te nemen en kennis over te dragen; aantoonbaar ervaring met de migratie of vervanging van een bestaand dataplatform, inclusief het aantoonbaar overzetten van functionaliteit; aantoonbaar ervaring met dataomgevingen, inclusief inrichting van security, rechten en toegangsbeheer; aantoonbaar ervaring binnen de (semi-)publieke sector in een politiek-bestuurlijk gevoelige omgeving.

Competenties: Objectief & Pragmatisch; Politiek bestuurlijke sensitiviteit; Verbindend vermogen & Didactisch; Resultaatgericht & passie. De Nederlandse Voedsel- en Warenautoriteit (NVWA) bewaakt de gezondheid van dieren en planten, het dierenwelzijn en de veiligheid van voedsel en consumentproducten, en handhaaft de natuurwetgeving.