Senior Data Engineer 24111

Achtergrond opdracht: We zijn op zoek naar een senior data engineer met uitgebreide ervaring in Azure, Databricks en DataOps, die het data team helpt Azure Landing Zone professioneel en schaalbaar in te richten. In deze rol ligt de nadruk op het opzetten en automatiseren van data-processen in de cloud. Waarom deze rol? We hebben iemand nodig met voldoende kennis en ervaring om Azure Databricks professioneel in te richten. Binnen het huidige team ontbreekt op dit moment nog de benodigde expertise om dit proces zelfstandig vorm te geven en te implementeren.

Om de gewenste voortgang te realiseren, is externe expertise noodzakelijk. Deze kan niet alleen helpen bij de inrichting, maar ook bij het versneld overdragen van kennis en vaardigheden aan het team, zodat het de benodigde werkwijze op termijn zelfstandig kan uitvoeren. Zeer urgent ivm uitval interne. Het RIVM verricht toegepast wetenschappelijk onderzoek op het terrein van de volksgezondheid en het milieu/leefomgeving. Rijksvaccinatieprogramma, modelleren van het ontstaan en de verspreiding van ziekten en monitoring van luchtkwaliteit zijn enkele voorbeelden van haar activiteiten.

Het RIVM stelt haar ICT-voorzieningen beschikbaar als het Shared Service Centre (SSC-)Campus. SSC-Campus levert ICT-diensten aan het RIVM en interdepartementaal aan andere rijksdiensten die ICT-ondersteuning wensen voor hun kennisintensieve en wetenschappelijke activiteiten. Deelnemers in SSC-Campus op dit moment (juni 2022) zijn RIVM, KNMI, CBG, CPB, CtgB, PBL, RLI, SCP en RWS.

Opdracht: Wat ga je doen? Je stelt infrastructure-as-code processen op en geeft -werkwijze verder vorm op Azure, waarbij je zorgt voor robuuste, geautomatiseerde uitrol van de Databricks infrastructuur op Azure realiseert. Je werkt met Azure Databricks en sluit onze bronsystemen aan via Kafka Connect om data betrouwbaar te ontsluiten, verwerken en beschikbaar te maken. Je zorgt dat onze cloudomgeving (Azure) aansluit op de eisen van de overheid op het gebied van beveiliging en regelgeving.

Je werkt samen met ons bestaande team en neemt hen mee in de gekozen oplossingen, zodat zij na jouw vertrek verder kunnen. Je draagt actief kennis over (documentatie, uitleg, sessies) zodat DataOps niet aan één persoon blijft hangen. Wat zoeken we? Een cloud engineer met aantoonbare ervaring in Azure; sterke kennis van Azure Databricks en DataOps-principes (CI/CD voor data, automatisering, monitoring, reproducibility); ervaring met Kafka Connect of vergelijkbare tooling voor batch en streaming data integratie; ervaring met Git en GitOps; ervaring met het opzetten van IaC op basis van ARM/Bicep/Terraform of vergelijkbaar; ervaring met Azure netwerksecurity: hub/spoke, NSG’s, Private Endpoints, UDR’s en micro segmentatie; ervaring met het inrichten van monitoring: Azure Monitor, Log Analytics (KQL) en/of Splunk; ervaring van het inrichten van toegangsbeheer voor Databricks: Entra ID/IAM, Unity Catalog rechten en workspace toegang; (pre) ervaring met Azure infrastructuurbeveiliging: Defender for Cloud, Sentinel (SIEM), SOC processen en KQL detecties; (pre) certificering Databricks Data Engineer Associate of Microsoft DP 750 (Azure Databricks); ervaring met werken binnen de overheid, zodat je bekend bent met de bijbehorende processen en kaders; vermogen om mensen mee te nemen, kennis over te dragen en een team op een volwassen manier te begeleiden in nieuwe werkwijzen.

Eisen: Algemeen: 1. Je kunt infrastructure-as-code processen opstellen en geeft -werkwijze verder vorm op Azure, waarbij je zorgt voor robuuste, geautomatiseerde uitrol van de Databricks infrastructuur op Azure realiseert. 2. Je kunt met Azure Databricks bronsystemen ontsluiten aan via Kafka Connect om data betrouwbaar te ontsluiten, verwerken en beschikbaar te maken.

Specifiek: 1. Ervaring van het inrichten van toegangsbeheer voor Databricks: Entra ID/IAM, Unity Catalogrechten en workspacetoegang. 2.

Ervaring met Azureinfrastructuurbeveiliging: Defender for Cloud, Sentinel (SIEM), SOCprocessen en KQLdetecties. 3. (Pre) Certificering Databricks Data Engineer Associate of Microsoft DP750 (Azure Databricks). 4. Ervaring met werken binnen de overheid, zodat je bekend bent met de bijbehorende processen en kaders.

Vereisten Profiel: 1. Sterke kennis van Azure Databricks en DataOps-principes (CI/CD voor data, automatisering, monitoring, reproducibility). 2. Ervaring met Kafka Connect of vergelijkbare tooling voor batch en streaming data integratie. 3. Ervaring met het opzetten van IaC op basis van ARM/Bicep/Terraform of vergelijkbaar; Ervaring met Azurenetwerksecurity: hub/spoke, NSG’s, Private Endpoints, UDR’s en microsegmentatie. 4. Ervaring met het inrichten van monitoring: Azure Monitor, Log Analytics (KQL) en/of Splunk.

Competenties: 1. Vermogen om mensen mee te nemen, kennis over te dragen en een team op een volwassen manier te begeleiden in nieuwe werkwijzen. 2. Ervaring met ontwikkeling en samenwerking binnen de Rijksoverheid of andere publieke organisaties. 3. Ervaring met het coördineren van ontwikkeling over meerdere teams, domeinen of organisaties heen.

Inzetgegevens: Gewenste startdatum: dinsdag 3 november 2026; initiële einddatum: maandag 3 mei 2027; uren per week: 36; max. aantal uren initiële inhuurtermijn: 907; aantal maanden initiële inhuurtermijn: 6; naam hoofdstandplaats: Bilthoven; hybride werken bespreekbaar: Nee. Let op deze aanvraag is niet geschikt voor zzp'ers. Dubbele doorleen is NIET toegestaan.