Big Data Engineer vacatures in de branche Transport, Opslag of Distributie

Contact

Inhuur

Senior Streaming Data Engineer

• Utrecht

• Einddatum: 30-11-2026

• 36 uur

• Startdatum: 01-12-2025

• Maximaal €98.00 per uur

• Sluit op

  17-12-2025 08:00

Als Senior Streaming Data Engineer werk je binnen een team aan geavanceerde, schaalbare data-oplossingen met behulp van Spark Structured Streaming en PySpark. Je ontwikkelt en onderhoudt real-time streaming platforms die vooral gericht zijn op semigestructureerde sensorische data en beeldverwerking. Je zorgt voor betrouwbare, efficiënte en schaalbare dataverwerking, waarbij security- en privacy-eisen van NS worden gewaarborgd.

Senior Streaming Data Engineer

• Utrecht

• Startdatum: 01-12-2025

• Einddatum: 30-11-2026

• Maximaal €98.00 per uur

• 36 uur

• Sluit op

  17-12-2025 08:00

Beoordelingscriteria

Bij de NS Inhuurdesk werken wij met mini aanbestedingen waarbij je je kunt inschrijven op een opdracht. Voor de selectie hanteren wij een aantal beoordelingscriteria. Dit zijn een aantal opdrachtspecifieke criteria en een aantal standaardvoorwaarden waar jouw aanbieding aan moet voldoen. Dit zijn:

1. Je maakt gebruik van een voorblad bij je aanbieding. Het voorblad vind je op onze marktplaats.

3. Ben je een bemiddelingsbureau? Dan is jouw bemiddelingsfee maximaal €6,- per uur.

Dit ga je doen

Als Senior Streaming Data Engineer speel je een cruciale rol binnen ons team. Je werkt samen met collega Data Engineers om geavanceerde data-oplossingen te ontwikkelen. Met jouw diepgaande kennis van Spark Structured Streaming en PySpark, draag je bij aan het ontwerp en de implementatie van schaalbare data-oplossingen die onze analytics teams in staat stellen om de beste beslissingen te nemen. Als onderdeel van onze afdeling werk je aan het bouwen en onderhouden van real-time streaming platformen, met focus op semigestructureerde sensorische databronnen en beeldverwerking. Je zorgt ervoor dat data betrouwbaar is en efficiënt en schaalbaar verwerkt wordt. Daarnaast voldoen de oplossingen aan de security- en privacyvereisten van NS. Het team waarin je gaat samenwerken richt zich op grote, semigestructureerde sensorische databronnen en ontwikkelt additionele diensten voor opslag en verwerking van beeldmateriaal.

Dankzij jouw doortastendheid en leergierigheid ben je van onschatbare waarde bij het: Achterhalen van de vraag achter de vraag waardoor je passende oplossingen kunt adviseren. Inrichten van de data pipeline tussen databronnen en onze analytics teams. Opzetten en beheren van de CI/CD pipeline waarbinnen een streaming pipeline van ontwikkeling tot productie wordt gerealiseerd. Bouwen in onze Azure cloud omgeving aan een fundament waarin alle streaming en sensorische databronnen ontsloten worden voor verdere analyses.

Welkom in de wereld van 'DIA' - Data, Innovatie & Analyse bij NS! Op het hoofdkantoor in Utrecht bij het Centraal Station, en gedeeltelijk hybride vanuit huis, bundelen collega's hun krachten. Een mix van ervaringen en persoonlijkheden, die elkaar graag opzoeken om met elkaar te sparren en kennis te delen. Binnen DIA werken wij Agile in Scrum teams om samen kwalitatief hoogwaardige en innovatieve oplossingen, platformen en dataproducten te ontwikkelen en onderhouden. Onze analytics teams kunnen hierdoor snel en betrouwbaar inzichten genereren om tot juiste acties te komen. Dit team bestaat uit vijf Data Engineers, een Product Owner en een Scrum Master. Bij NS vinden we diversiteit en inclusie belangrijk, het maakt samenwerken leuker en het resultaat wordt er ook nog beter van. Wat jouw achtergrond of levensovertuiging is, maakt dan ook niet uit: we zijn vooral benieuwd naar jou als persoon en wat jij meebrengt naar als Senior Streaming Data Engineer

• Je hebt als Data Engineer minimaal 7 jaar ervaring met het verwerken van grote hoeveelheden data en minimaal 3 jaar ervaring met Spark Structured Streaming.;
• Je hebt minimaal 7 jaar ervaring met Python en PySpark, het ontwikkelen van CI/CD-pipelines, geautomatiseerd testen en Infrastructure-as-Code;
• Je hebt ervaring met Java en/of Scala, Microsoft Azure, Databricks, Azure DevOps, Terraform en/of Bicep, OpenTofu, Kafka, AMQP, RabbitMQ en/of Event Hub;
• Je hebt een actueel en relevant inzicht in technologische ontwikkelingen binnen dit domein en gebruikt jouw expertise graag om innovatieve oplossingen en platformen te creëren;
• Je bent een zelfstarter die graag werkt in een Agile omgeving binnen een jong en gedreven team.
• Je hebt een waarde- en organisatiegerichte mindset, waardoor je wensen kunt vertalen naar duurzame oplossingen en je goed kunt samenwerken met collega's om een kwalitatief product neer te zetten.
• Bereikbaarheidsdiensten kunnen in de toekomst onderdeel uitmaken van deze rol

We zoeken collega's met lef, die open staan voor verandering. Voor deze functie ligt de nadruk op proactief handelen. Dit betekent dat je zelfstandig initiatief neemt, zelfs bij onvolledige informatie, en actief bijdraagt aan verbeteringen binnen je team en de business.

Deze opdracht is alleen geschikt voor kandidaten die in loondienst zijn en waarvoor loonbelasting en premies volks- en werknemersverzekeringen (WW, WAO, WIA en ZW) worden afgedragen. Deze opdracht is niet geschikt voor zelfstandig ondernemers en professionals (waaronder zzp'ers) die zichzelf uitlenen. Deze opdracht is ook niet geschikt voor de directeur-grootaandeelhouder die niet is verzekerd voor de werknemersverzekeringen. Ik verklaar dat de aangeboden kandidaat geen zelfstandig professional is, ook niet via een doorleenconstructie.

Werken bij NS betekent dat jij hét verschil kunt maken in de wereld van duurzame mobiliteit.

Als Senior Streaming Data Engineer speel je een cruciale rol binnen ons team. Met jouw diepgaande kennis van Spark Structured Streaming en PySpark, draag je bij aan het ontwerp en de implementatie van schaalbare data-oplossingen die onze analytics teams in staat stellen om de beste beslissingen te nemen. Als onderdeel van onze afdeling werk je aan het bouwen en onderhouden van real-time streaming platformen, met focus op semigestructureerde sensorische databronnen en beeldverwerking. Daarnaast voldoen de oplossingen aan de security- en privacyvereisten van NS. Het team waarin je gaat samenwerken richt zich op grote, semigestructureerde sensorische databronnen en ontwikkelt additionele diensten voor opslag en verwerking van beeldmateriaal.

Dankzij jouw doortastendheid en leergierigheid ben je van onschatbare waarde bij het: Achterhalen van de vraag achter de vraag waardoor je passende oplossingen kunt adviseren. Inrichten van de data pipeline tussen databronnen en onze analytics teams. Opzetten en beheren van de CI/CD pipeline waarbinnen een streaming pipeline van ontwikkeling tot productie wordt gerealiseerd. Bouwen in onze Azure cloud omgeving aan een fundament waarin alle streaming en sensorische databronnen ontsloten worden voor verdere analyses.

Welkom in de wereld van 'DIA' - Data, Innovatie & Analyse bij NS! Op het hoofdkantoor in Utrecht bij het Centraal Station, en gedeeltelijk hybride vanuit huis, bundelen collega's hun krachten. Een mix van ervaringen en persoonlijkheden, die elkaar graag opzoeken om met elkaar te sparren en kennis te delen. Binnen DIA werken wij Agile in Scrum teams om samen kwalitatief hoogwaardige en innovatieve oplossingen, platformen en dataproducten te ontwikkelen en onderhouden. Onze analytics teams kunnen hierdoor snel en betrouwbaar inzichten genereren om tot juiste acties te komen. Dit team bestaat uit vijf Data Engineers, een Product Owner en een Scrum Master. Bij NS vinden we diversiteit en inclusie belangrijk, het maakt samenwerken leuker en het resultaat wordt er ook nog beter van. Wat jouw achtergrond of levensovertuiging is, maakt dan ook niet uit: we zijn vooral benieuwd naar jou als persoon en wat jij meebrengt naar als Senior Streaming Data Engineer

• Je hebt als Data Engineer minimaal 7 jaar ervaring met het verwerken van grote hoeveelheden data en minimaal 3 jaar ervaring met Spark Structured Streaming.;
• Je hebt minimaal 7 jaar ervaring met Python en PySpark, het ontwikkelen van CI/CD-pipelines, geautomatiseerd testen en Infrastructure-as-Code;
• Je hebt ervaring met Java en/of Scala, Microsoft Azure, Databricks, Azure DevOps, Terraform en/of Bicep, OpenTofu, Kafka, AMQP, RabbitMQ en/of Event Hub;
• Je hebt een actueel en relevant inzicht in technologische ontwikkelingen binnen dit domein en gebruikt jouw expertise graag om innovatieve oplossingen en platformen te creëren;
• Je bent een zelfstarter die graag werkt in een Agile omgeving binnen een jong en gedreven team.
• Je hebt een waarde- en organisatiegerichte mindset, waardoor je wensen kunt vertalen naar duurzame oplossingen en je goed kunt samenwerken met collega's om een kwalitatief product neer te zetten.
• Bereikbaarheidsdiensten kunnen in de toekomst onderdeel uitmaken van deze rol

We zoeken collega's met lef, die open staan voor verandering. Dit betekent dat je zelfstandig initiatief neemt, zelfs bij onvolledige informatie, en actief bijdraagt aan verbeteringen binnen je team en de business.

Deze opdracht is alleen geschikt voor kandidaten die in loondienst zijn en waarvoor loonbelasting en premies volks- en werknemersverzekeringen (WW, WAO, WIA en ZW) worden afgedragen. Deze opdracht is niet geschikt voor zelfstandig ondernemers en professionals (waaronder zzp'ers) die zichzelf uitlenen. Deze opdracht is ook niet geschikt voor de directeur-grootaandeelhouder die niet is verzekerd voor de werknemersverzekeringen. Ik verklaar dat de aangeboden kandidaat geen zelfstandig professional is, ook niet via een doorleenconstructie.

Werken bij NS betekent dat jij hét verschil kunt maken in de wereld van duurzame mobiliteit.

Bij de NS Inhuurdesk werken wij met mini aanbestedingen waarbij je je kunt inschrijven op een opdracht. Dit zijn een aantal opdrachtspecifieke criteria en een aantal standaardvoorwaarden waar jouw aanbieding aan moet voldoen.