Ingeniero de Datos Senior - Azure + Databricks

Over de functie

We zoeken een Senior Data Engineer die ons team ondersteunt bij de integratie en verwerking van data vanuit SAP S/4HANA Cloud naar Databricks. Je werkt volledig remote vanuit Bogotá en bent verantwoordelijk voor het ontwerpen, bouwen en onderhouden van data‑pipelines in een cloud‑omgeving.

Belangrijkste verantwoordelijkheden

• Ontwikkelen en onderhouden van pipelines met Azure Data Factory.
• Implementeren van ingestie‑ en transformatieprocessen in Databricks.
• Opzetten en beheren van Bronze‑ en Silver‑lagen in Delta Lake.
• Implementeren van incrementele en continue data‑ingestie.
• Optimaliseren en monitoren van Spark‑processen en pipelines.
• Beheren van data‑governance via Unity Catalog.
• Documenteren van technische architectuur en processen.

Gewenst profiel

• Minimaal 4 jaar ervaring als Data Engineer in cloud‑omgevingen.
• Aantoonbare ervaring met Azure Data Factory en Databricks (Delta Lake, Auto Loader, Delta Live Tables, Unity Catalog).
• Solide kennis van Python, PySpark en geavanceerde SQL.
• Ervaring met Azure Data Lake Storage Gen2 en Git‑versionering.
• Ervaring met grootschalige data‑ingestie in productie‑omgevingen.
• Pré: ervaring met SAP‑data, OData‑API’s, Airflow, Databricks Workflows, Terraform of Azure DevOps.

Vereiste vaardigheden

• Azure Data Factory
• Databricks
• Delta Lake
• Auto Loader
• Delta Live Tables
• Unity Catalog
• Python
• PySpark
• SQL (gevorderd)
• Azure Data Lake Storage Gen2
• Git
• SAP (pré)
• OData (pré)
• Airflow (pré)
• Terraform (pré)
• Azure DevOps (pré)

Wat wij bieden

• 100% remote werken vanuit Bogotá.
• Contract op basis van Werk‑en‑Zaken (70/30) voor 6 maanden.
• Marktconforme vergoeding (in overleg).