Senior Data Engineer (2 FTE)

Het Data Office team is onderdeel van de afdeling IT Services van RET. Het team ontsluit en verwerkt data uit uiteenlopende databronnen en stelt deze beschikbaar voor analysedoeleinden. Daarnaast is het team verantwoordelijk voor de ontwikkeling en het beheer van CREDO, het centrale data- en analyticsplatform van RET.

CREDO is gebaseerd op een lakehouse-architectuur in Microsoft Azure, met een medallion-structuur en Delta Lake. Het team werkt nauw samen met data-analisten, data stewards en andere stakeholders om ruwe data om te zetten in dataproducten die bijdragen aan de bedrijfsdoelstellingen.

Binnen de Data Community worden best practices, standaarden en architectuurprincipes geborgd. Data governance, kwaliteit, veiligheid en een goed functionerende dataketen staan hierbij centraal.

Momenteel bevindt RET zich in een migratietraject naar Microsoft Fabric. Op de roadmap staan onder andere performanceoptimalisatie, datakwaliteit, monitoring en kostenbeheersing. De organisatie streeft naar een veilige, slimme en verantwoorde werkwijze op basis van metadata-gedreven principes.

De functie

Als Senior Data Engineer speelt de professional een belangrijke rol in de verdere ontwikkeling van RET als datagedreven organisatie. De professional werkt aan zowel de oplevering van dataproducten als de doorontwikkeling en het beheer van het CREDO-platform.

De professional ontwikkelt schaalbare en efficiente datapipelines en draagt bij aan datagedreven processen binnen verschillende bedrijfsdomeinen, waaronder Asset Management, P&O en Finance.

De professional is verantwoordelijk voor het ontsluiten, verwerken en dimensioneel modelleren van gestructureerde en ongestructureerde databronnen. Hierbij maakt de professional gebruik van cloud-native oplossingen en geautomatiseerde data quality controls binnen Microsoft Fabric.

De professional werkt in een agile omgeving samen met andere data engineers, de Lead Data Platform Engineer, Solution Architect, data-analisten en stakeholders vanuit de business.

Naast de technische realisatie levert de professional een actieve bijdrage aan architectuurdiscussies, kennisdeling en de verdere professionalisering van het Data Office.

Resultaat van de opdracht

Aan het einde van de opdracht heeft de professional bijgedragen aan de verdere ontwikkeling van het operationele CREDO-dataplatform door een of meerdere overeengekomen onderdelen van de roadmap te realiseren.

De op te leveren resultaten omvatten onder andere:

• Geimplementeerde roadmaponderdelen die aansluiten op de doelarchitectuur.
• Werkende en gedocumenteerde datapipelines.
• Ontwikkelde PySpark-notebooks.
• Ontworpen en gerealiseerde dimensionele datamodellen.
• Oplossingen voor het ontsluiten en verwerken van gestructureerde en ongestructureerde databronnen.
• Verbeteringen op het gebied van performance, datakwaliteit, monitoring en kostenbeheersing.

Werkzaamheden

• Bijdragen aan de verdere ontwikkeling van het CREDO-dataplatform en realiseren van een of meerdere speerpunten op de roadmap.
• Implementeren van de migratie van CREDO vanuit Azure Synapse naar Microsoft Fabric, op basis van de intermediate state en target state architecture.
• Omzetten van bestaande pipelines, notebooks en datamodellen naar Microsoft Fabric.
• Ontwikkelen en onderhouden van schaalbare datapipelines en PySpark-notebooks binnen de medallion-architectuur (bronze, silver en gold).
• Optimaliseren van prestaties en kosten van datapipelines en dataverwerking.
• Ontwerpen en implementeren van dimensionele datamodellen.
• Ontsluiten en verwerken van gestructureerde en ongestructureerde databronnen binnen complexe bronlandschappen.
• Implementeren van data quality frameworks en controles binnen ETL/ELT-processen.
• Ontwikkelen van data cleansing-processen om bekende datakwaliteitsproblemen op te lossen.
• Structureren en beheren van SQL-datawarehouses, met focus op Azure SQL Database en Fabric Database.
• Samenwerken met data-analisten om requirements te vertalen naar technische specificaties.
• Implementeren en gebruiken van CI/CD-pipelines voor geautomatiseerde build-, test- en deploymentprocessen, inclusief kwaliteits- en securitycontroles.
• Analyseren en oplossen van complexe technische problemen.
• Uitvoeren van code reviews en verzorgen van documentatie en monitoring.
• Actief delen van technische kennis en coachen van andere data engineers.

• Meer dan 7 jaar werkervaring als Data Engineer met de ontwikkeling en het beheer van een dataplatform binnen Microsoft Azure.
• Aantoonbare ervaring met Microsoft Fabric en/of Azure Synapse Analytics.
• Ervaring met het implementeren van dataoplossingen in complexe omgevingen met meerdere bronsystemen, afhankelijkheden en stakeholders.
• Ervaring met lakehouse-architecturen en medallion-principes.
• Uitgebreide kennis en minimaal 5 jaar ervaring met dimensioneel datamodelleren, SQL-programmering en PySpark-notebooks.
• Ervaring met het standaardiseren en automatiseren van workflows.
• Aantoonbare ervaring met Azure DevOps, Git en CI/CD-principes.
• Ervaring met werken in een agile omgeving.
• Ervaring met het vertalen van epics naar features binnen squads en het aanscherpen van user stories met andere engineers.
• Beschikking over een of meerdere relevante Microsoft Azure-certificeringen binnen data engineering, zoals Azure Data Engineer Associate (DP-203).
• Zelfstandige, proactieve werkhouding en het vermogen om snel effectief te functioneren binnen een nieuwe organisatie.

Wensen

• Ervaring met het ontwikkelen van dataproducten op basis van SAP en SuccessFactors.

Competenties

• Uitstekende communicatieve vaardigheden en het vermogen om effectief te communiceren met verschillende niveaus binnen de organisatie.
• Sterk analytisch en probleemoplossend vermogen.
• In staat om complexe datavraagstukken te vertalen naar schaalbare en efficiente technische oplossingen.
• Proactief en zelfstandig in het identificeren en oplossen van technische uitdagingen.
• Ervaring met het begeleiden en coachen van andere engineers.
• Vermogen om technische teams te ondersteunen bij het ontwikkelen van hun kennis en vaardigheden.
• Bereidheid om actief kennis te delen en bij te dragen aan de verdere professionalisering van het team.

RET is een belangrijke speler in het openbaar vervoer in Rotterdam en omgeving. De organisatie is volop in ontwikkeling en werkt continu aan verbetering en vernieuwing van haar dienstverlening.

Binnen deze opdracht krijgt de professional de mogelijkheid om bij te dragen aan de verdere ontwikkeling van een toekomstbestendig dataplatform en daarmee aan de operationele efficientie en kwaliteit van het openbaar vervoer in de regio.

Het Data Office team is onderdeel van de afdeling IT Services van RET. Het team ontsluit en verwerkt data uit uiteenlopende databronnen en stelt deze beschikbaar voor analysedoeleinden. Daarnaast is het team verantwoordelijk voor de ontwikkeling en het beheer van CREDO, het centrale data- en analyticsplatform van RET.

Binnen de Data Community worden best practices, standaarden en architectuurprincipes geborgd. Data governance, kwaliteit, veiligheid en een goed functionerende dataketen staan hierbij centraal.

Momenteel bevindt RET zich in een migratietraject naar Microsoft Fabric. Op de roadmap staan onder andere performanceoptimalisatie, datakwaliteit, monitoring en kostenbeheersing. De organisatie streeft naar een veilige, slimme en verantwoorde werkwijze op basis van metadata-gedreven principes.

De selectiegesprekken vinden plaats op donderdag 22 en vrijdag 23 oktober 2026, tussen 09:30 en 12:30 uur en tussen 13:30 en 16:30 uur.

Optie tot verlenging: Niets over bekend.

Hybride: Geen verdere informatie

Overig algemeen:

Een VOG-verklaring kan onderdeel zijn van de selectieprocedure.

De bij gunning overeengekomen tarieven zijn gedurende twee jaar na de ingangsdatum van de overeenkomst vast en bindend. Indexering of tussentijdse tariefverhogingen zijn gedurende deze periode uitgesloten, behoudens wijzigingen als gevolg van dwingendrechtelijke overheidsmaatregelen of cao-verplichtingen.