Data Engineer sr – Amsterdam / remote

Ontwerpen, ontwikkelen en optimaliseren van data pipelines binnen Azure Databricks.

Realiseren van data-ingestie-, transformatie- en verrijkingsprocessen met Python, PySpark en SQL.

Inrichten en beheren van lakehouse-architecturen volgens medallion architectuur.

Ontwikkelen en onderhouden van Databricks notebooks, workflows en Unity Catalog-structuren.

Implementeren van Infrastructure as Code (IaC) en CI/CD-processen binnen Azure DevOps.

Kennis van dimensioneel modelleren.

Opzetten en uitvoeren van unit-, integratie- en regressietesten.

Toepassen van software engineering best practices, waaronder versiebeheer, code reviews, linting en security scanning.

Samenwerken met data-engineers, analisten en platformteam om hoogwaardige data-oplossingen te realiseren.

Functie eisen : Neem deze vragen over en puntsgewijs beantwoorden met de jaartallen:

Minimaal 5 jaar aantoonbare werkervaring met Data Engineering in de Azure Cloud omgeving.

Minimaal 5 jaar aantoonbare werkervaring met Python en PySpark

Minimaal 5 jaar aantoonbare werkervaring met SQL in een enterprise omgeving

Minimaal 3 jaar aantoonbare werkervaring met Databricks notebooks, pipelines en Unity Catalog

Minimaal 3 jaar aantoonbare werkervaring met infra-ascode (IAC) en Azure DevOps CI/CD pipelines

Minimaal 2 jaar aantoonbare werkervaring met data lakehouses (bijv. medaillon structuur)

Aantoonbare werkervaring met testen (unit testen, regressietesten)

Aantoonbare ervaring met Git, code linting en code scanning

Aantoonbare werkervaring met het ontwerpen en bouwen van dimensionele modellen.

Minimaal 2 jaar werkervaring met Data Vault 2.0

Minimaal 3 jaar werkervaring met data engineering / BI in een complexe Enterprise organisatie in de financiële sector

Minimaal 3 jaar werkervaring met Azure Data Factory 10

Minimaal 3 jaar werkervaring met Azure Synapse Analytics

Minimaal HBO denk- en werkniveau

Goede schriftelijke en mondelinge vaardigheden in de Nederlandse taal

Relevante Databricks certificering (Data engineer Associate of Professional)

Alleen als uw werkervaring overeenkomt met de aanvraag, ontvangen wij graag uw:

– CV (word-document), maximaal 5 pagina’s en geen logo;

– Motivatie;

– 2 referenties van een van de laatste relevante opdrachten (referenties worden pas na toestemming gebeld);

– Uurtarief (indicatie);

– Beschikbaarheid en geboekte vakanties;

– Onder vermelding van vacaturenummer: 2909

(goede beheersing van de Nederlandse taal in woord en geschrift).

U kunt uw gegevens sturen naar [e-mailadres] of bellen: [telefoonnummer].

HerCor BV, Hoek van Holland.