Data Engineer

Voor één van onze opdrachtgevers in Gelderland/ Overijssel zijn wij op zoek naar een Data Engineer.

Startdatum: 15-12-2023
Einddatum: 14-12-2024
Optie tot verlenging: 1 keer 1 jaar
Uren per week: 32 – 40 uur

De belangrijkste taken en verantwoordelijkheden zijn

• Migratie van bestaande processen van het datawarehouse naar de datahub;
• Doorontwikkeling en beheer van bestaande API’s;
• Sparren met de technical lead over architectuurkeuzes;
• Kennisoverdracht naar het team.

Jij gaat het team helpen met de transitie naar de datahub. De werkzaamheden zullen onder andere bestaan uit het omschrijven van SQL code naar Apache Spark en DBT voor creatie van data producten. Ook help je met het door ontwikkelen en onderhouden van Python API’s die data op maat ontsluiten naar andere teams binnen de organisatie.

Je zet je jouw kennis van Python, DBT, Apache Spark en Databricks in om het kennisniveau binnen het team naar een hoger plan te tillen. Daarnaast voer je adaptief onderhoud uit op de bestaande systemen, die veelal werken met Python en PostgreSQL.

Belangrijkste technieken, methoden en tools

• Python;
• Fast API;
• Databricks;
• DBT;
• Apache Spark;
• PostgreSQL;
• Kubernetes;
• Jenkins of Tekton.

Functie-eisen

• Minimaal een afgeronde hbo-opleiding of hoger.
• Minimaal vijf (5) jaar werkervaring met Python.
• Minimaal vijf (5) jaar werkervaring met PostgreSQL.
• Minimaal twee (2) jaar werkervaring met Apache Spark.
• Minimaal twee (2) jaar werkervaring met Databricks.
• Minimaal twee (2) jaar werkervaring met Kubernetes.

Interesse in deze leuke opdracht? Reageer dan snel met een motivatie en relevant Nederlands CV!
Neem ook gerust contact met mij op voor de volledige opdracht- en takenomschrijving!