Locatie: Op locatie
Dienstverband: Fulltime
Over de functie
Wij zijn op zoek naar een ervaren Databricks Engineer om ons groeiende datateam te versterken.
In deze functie ben je verantwoordelijk voor het ontwerpen, bouwen en optimaliseren van schaalbare datapijplijnen en analytische oplossingen op het Databricks-platform.
Je werkt nauw samen met engineers, data scientists, analisten en business stakeholders om betrouwbare en hoogwaardige dataoplossingen te leveren die directe bedrijfswaarde creëren.
Wat ga je doen?
- Ontwikkelen en onderhouden van ETL/ELT-pijplijnen met behulp van Databricks, PySpark, SQL en Delta Lake.
- Ontwerpen en implementeren van schaalbare Data Lakehouse-oplossingen in de cloud.
- Inladen, transformeren en integreren van gegevens uit meerdere gestructureerde en ongestructureerde databronnen.
- Beheren en optimaliseren van Databricks-clusters, jobs en workflows.
- Waarborgen van datakwaliteit, governance en compliance binnen alle datapijplijnen.
- Samenwerken met multidisciplinaire teams om geavanceerde analyses en machine learning-toepassingen mogelijk te maken.
- Monitoren, oplossen van problemen en verbeteren van de prestaties van datapijplijnen.
- Bijdragen aan automatisering, CI/CD-processen en DevOps best practices.
Wat zoeken wij?
- Aantoonbare ervaring als Data Engineer met uitgebreide praktijkervaring in Databricks.
- Uitstekende kennis van PySpark, SQL en gedistribueerde dataverwerking.
- Sterke kennis van Delta Lake en Data Lakehouse-architecturen.
- Ervaring met minimaal één toonaangevend cloudplatform (Azure, AWS of GCP).
- Bekendheid met streamingdatatechnologieën zoals Kafka, Event Hubs, Kinesis of vergelijkbare oplossingen.
- Ervaring met CI/CD-pijplijnen en versiebeheertools zoals GitHub, GitLab, Jenkins of Azure DevOps.
- Sterke analytische vaardigheden, probleemoplossend vermogen en een samenwerkingsgerichte instelling.
Pré
- Ervaring met MLflow en MLOps-praktijken.
- Kennis van Business Intelligence-tools zoals Power BI, Tableau of Looker.
- Ervaring met Infrastructure-as-Code-tools zoals Terraform, Pulumi of CloudFormation.
- Ervaring met datamigratieprojecten van on-premises omgevingen naar de cloud.
Waarom werken bij ons?
- Werk aan innovatieve Big Data- en analyticsprojecten.
- Maak deel uit van een samenwerkend, innovatief en snelgroeiend team.
- Profiteer van een aantrekkelijk salaris, uitstekende secundaire arbeidsvoorwaarden en volop mogelijkheden voor professionele ontwikkeling.
- Werk in een flexibele werkomgeving met mogelijkheden voor hybride werken en werken op afstand.