Senior Data Engineer

De Rotterdamse Electrische Tram NV (RET) biedt openbaar vervoer in Rotterdam en omstreken. De organisatie is volop in ontwikkeling en werkt aan optimaal openbaar vervoer. Je werkt in een professionele en prettige werkomgeving met collega’s die zich inzetten voor een maatschappelijk relevant thema.

RET zoekt per direct een Senior Data Engineer voor een tijdelijke functie van zes maanden. De startdatum is z.s.m., maar niet later dan 2-11-2026. Het Data Office team is onderdeel van de afdeling IT Services en ontsluit en verwerkt data van uiteenlopende databronnen voor analysedoeleinden. Het team ontwikkelt en beheert CREDO, het centrale data- en analyticsplatform van de organisatie, gebaseerd op een lakehouse-architectuur in Azure met een medallion-structuur en Delta Lake. Momenteel werkt het team aan de migratie naar Microsoft Fabric. Op de roadmap staan onder andere performanceoptimalisatie, datakwaliteitsbewaking, monitoring en kostenbeheersing. Als Senior Data Engineer werk je mee aan de oplevering van dataproducten, de doorontwikkeling en het beheer van CREDO en draag je direct bij aan datagedreven processen binnen domeinen zoals assetmanagement, P&O en finance.

De gesprekken zullen plaatsvinden op donderdag 22 en vrijdag 23 oktober: 9:30-12:30 en 13:30-16:30.

Taken:

• Realiseren van de verdere ontwikkeling van het operationele CREDO-dataplatform door de implementatie van één of meer overeengekomen roadmaponderdelen, passend binnen de doelarchitectuur en de doorontwikkeling van het platform.
• Opleveren van werkende en gedocumenteerde datapipelines, het opzetten van PySpark-notebooks en het ontwerpen en bouwen van datamodellen ten behoeve van de ontsluiting en verwerking van gestructureerde en ongestructureerde databronnen.
• Bijdragen aan het verder ontwikkelen van het CREDO dataplatform en verantwoordelijk zijn voor de realisatie van een of meer speerpunten op de roadmap.
• Implementeren van de migratie van CREDO in Synapse naar Microsoft Fabric, op basis van de intermediate state en target state architecture, waaronder het omzetten van bestaande pipelines, notebooks en datamodellen.
• Bouwen en onderhouden van schaalbare datapipelines en PySpark notebooks binnen de medallion-structuur (bronze, silver en gold), met een focus op prestatie- en kostenoptimalisatie.
• Implementeren van dimensionele datamodellen en het ontsluiten en verwerken van gestructureerde en ongestructureerde databronnen, ook in complexe bronlandschappen.
• Uitvoeren en implementeren van data quality framework en checks op datasets gedurende de ETL/ELT-processen om de nauwkeurigheid en volledigheid te waarborgen, en implementeren van data cleansing processen om bekende datakwaliteitsproblemen op te lossen.
• Structureren en managen van SQL datawarehouse met een focus op Azure SQL Database en Fabric Database.
• Samenwerken met data analisten om requirements te verzamelen en te vertalen naar technische specificaties voor data-oplossingen.
• Implementeren en gebruiken van CI/CD-pijplijnen voor geautomatiseerde build, test en deployment processen, inclusief integratie van quality en security controles.
• Analyseren en oplossen van complexe technische problemen, uitvoeren van code reviews en zorgen voor documentatie en monitoring van de opgeleverde oplossingen.
• Inbrengen en borgen van je expertise en ervaring binnen het Data Office team.
• Coachen van andere data engineers om hen zowel individueel als het team naar een hoger plan te trekken.
• Samenwerken met andere data engineers binnen het Data Office in een agile werkomgeving.
• Nauw samenwerken met de lead data platform engineer en solution architect, data analisten en andere stakeholders binnen de business units om innovatieve en robuuste oplossingen te realiseren die de bedrijfsdoelen ondersteunen.
• Kennis en ervaring inbrengen om het CREDO platform verder door te ontwikkelen met nieuwe functionaliteit en verbeterde performance.
• Een actieve rol spelen in constructieve discussies binnen Data Office en actief kennis delen met andere data engineers.