PySpark Developer

  • Share :

Wat is je opdracht

In eerste instantie neem jij de ontwikkeling en het beheer van een holistisch Modern Data Platform gebouwd in de Microsoft Azure Cloud voor je rekening.

Bovendien ben jij als IT Custodian een belangrijke speler in het Data Platform team. Je bent verantwoordelijk voor de ontwikkeling, de implementatie en de technische optimalisering van de Big Data pipeline die het platform bevat.

Een woordje over de Nationale Loterij

Al ruim 90 jaar zorgt de Nationale Loterij voor veilig speelplezier voor alle Belgen ouder dan 18 jaar. Dankzij het vertrouwen van al haar spelers boekte de Nationale Loterij in 2023 een omzet van 1,49 miljard euro. Dankzij de kleine inzetbedragen van veel spelers kan de Nationale Loterij elk jaar zo'n 345 miljoen euro laten terugvloeien naar de Belgische samenleving. Talrijke waardevolle projecten en verenigingen krijgen op die manier de steun die ze nodig hebben om het verschil te maken.

Samen met de Business zorgde onze IT-afdeling voor recordresultaten waar we terecht trots op mogen zijn

470 miljoen e-commercetransacties, met een maximumpiek van bijna 8000 transacties/min

100% beschikbaarheid van de core drawing/gaming engines

99,98% beschikbaarheid van de kanalen

Het IT-departement is het kloppend hart van de Nationale Loterij dat nauw samenwerkt met de hele organisatie om onze spelers 7 dagen op 7 de beste spelervaring te laten beleven in een veilige omgeving en om te allen tijde onze onfeilbare reputatie hoog te houden. Onze miljoenen spelers, onze vele winnaars en de ontelbare goede doelen die we dagelijks voor meer dan 520. 000 euro ondersteunen, rekenen daarop.

Binnen het Data Platform team ben je verantwoordelijk voor de volgende aspecten

Je staat in voor het verwerken en het transformeren van gegevens. Met behulp van PySpark voer je de ETL-operaties uit vanuit de verschillende gegevensdatabanken van de Nationale Loterij.

Je werkt aan het nieuwe, moderne ontwerp van het dataplatform (medallion design) in nauwe samenwerking met de verantwoordelijke solution designer.

Je optimaliseert de Spark-taken met het oog op betere prestaties en je beheert de resource allocation.

Je maakt gegevensanalyses en modelleringen en je werkt samen met de Data Scientists om op grote schaal machine learningmodellen en algoritmes te ontwikkelen.

Hoe kun jij het verschil maken

Je hebt een diploma Bachelor of Master of Science in een Big Data-gerelateerd domein met minstens 5 jaar ervaring in datapipelines en cloudtoepassingen. Bovendien heb je een goede kennis van Python.

Je hebt kennis van de volgende technologieën of concepten

Apache Spark, Python, notebooks

DevOps Azure CI/CD pipeline

Microsoft SQL of Dbt

Azure Data Platform Stack, waaronder:

Synapse Analytics

Lakehouse

Fabrics

Semantic model

PBI

Ervaring met cloud computing, data engineering, Big Data processing, performance tuning

Architecture Azure Data Platform

Je bent gedreven en schrikt er niet voor terug om verantwoordelijkheid te nemen binnen een team. Je kunt zelfstandig werken, maar bent tegelijk ook een teamspeler.

Drie redenen waarom deze functie geknipt is voor jou

Je bent een expert in Python, je hebt ervaring met Azure- en Fabrictechnologie en met de optimalisering en prestaties van datapipelines.

Je bent bekend met DevOps methodologie, want deze zul je toepassen in je dagelijkse taken.

Je bent van nature analytisch aangelegd en je lost graag moeilijke vraagstukken op.

Wat wij je aanbieden

Aandacht voor jou

We vinden het belangrijk dat jij het beste uit jezelf kan halen, maar ook dat we het beste uit elkaar kunnen halen. Jouw ontwikkeling bij de Nationale Loterij heb je in je eigen handen.

Een goed evenwicht tussen "werk" en "privéleven"

Bij de Nationale Loterij krijg je interessante aanvullingen op je arbeidsvoorwaarden, zoals 32 vakantiedagen, vlottende arbeidstijden binnen een werkweek van 37,5u, en de mogelijkheid om aan thuiswerk te doen.

Geld enzo.

Werken bij de Nationale Loterij is een flinke uitdaging, en daar zetten wij uiteraard iets tegenover. Naast een marktconform salaris met bedrijfswagen ontvang je ook een jaarlijkse bonus, vakantiegeld, een eindejaarspremie, vergoedingen voor woon-werk-verplaatsingen, aanvullende verzekeringen, en nog meer.

Read the full job description and apply online on the recuiter's web-site

Find Jobs Hiring Now Near You!

Get Jobilize Mobile App

Get Jobilize Job Search Mobile App Now

Receive real-time job alerts and never miss the right job again

Get it on Google Play Download on the App Store
Project Engineer Fire Suppression

Johnson Controls


Wat je zult doen Als Project Engineer draag je mee zorg voor de realisatie van Fire Suppression projecten binnen de geldende marktsegmenten, samen met de project teams. Je zal de Project Manager bijstaan in het opleveren van de oplossing op de verschillende klantensites. In deze opdracht zal je...


Product Owner Public Cloud

Argenta

  • BE - Vlaanderen - Vlaanderen - Antwerpen

  • October 11, 2024


Als product owner bepaal jij mee de visie van Argenta rond onze Public Cloud-producten. Ben jij in de wolken om innovatieve oplossingen te implementeren? • Samen met je collega's ontwikkel, implementeer en beheer je Azure Cloud oplossingen vanuit een Center For Enablement, waarbij je nauw...


Belfius Bank & Verzekeringen - Enterprise Architect Loans

Belfius Bank and Verzekeringen

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 28, 2024


Samen met een team van Enterprise Architecten bouw je mee aan de toekomst van Belfius Technology. Vanuit je engineering mindset moderniseer je bestaande technologieën en integreer je nieuwe zoals GenAI, Cloud, Data. Zo versterk je de resiliency en security van Belfius Bank, Insurance & Beyond met...


Belfius Bank & Verzekeringen - Project Manager

Belfius Bank and Verzekeringen

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 9, 2024


Omschrijving • Belfius Auto Lease, gevestigd in Brussel, is een operationele leasemaatschappij die deel uitmaakt van de Belfius Groep. • Belfius Auto Lease transformeert zich tot een mobiliteitsbedrijf dat geïntegreerde multimodale en duurzame mobiliteitsoplossingen aanbiedt via een aantal...


Market Access Manager Belgium & Luxembourg

CSL Vifor


CSL Vifor is looking for a Market Access Manager to take care of Belgium and Luxembourg. You will report to the Head of Patient Access for the Benelux cluster. Your responsibilities will be the following: Market Access • Responsible for identifying optimal access pathways that lead to reimbursement...


Project & Service Manager @ CERT

Egov Select

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 4, 2024


Het Centrum voor Cybersecurity België (CCB) staat in voor de opvolging, coördinatie en uitvoering van de Belgische cyberveiligheidsstrategie en staat onder het gezag van de eerste minister. • Het is je ongetwijfeld niet ontgaan dat cyberveiligheid een zeer actueel onderwerp is. We kennen...


Cloud Solution Architect

Sopra Steria

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 22, 2024


Sopra Steria offers tailored, end-to-end corporate technology and software solutions to help clients make bold choices and deliver results. Successfully so! With more than 56.000 colleagues in 30 countries, we rank as Europe's leading digital solutions provider. Some of the most successful companies...


Service Public de - Expert Gestionnaire de Portefeuille de Projets PMO

Service Public de Wallonie

  • BE - Wallonie - Wallonie - Beez

  • October 3, 2024


Au sein du SPW agriculture, ressources naturelles et environnement du Service public de Wallonie, l'Organisme payeur de Wallonie (Opw) est accrédité par le Gouvernement wallon afin de payer les aides relatives à la Politique agricole commune (Pac) en Wallonie. Les activités de l'Opw reposent, entre...


Warehouse Operator

World Courier Belgium s a


Our team members are at the heart of everything we do. At Cencora, we are united in our responsibility to create healthier futures, and every person here is essential to us being able to deliver on that purpose. If you want to make a difference at the center of health, come join our innovative...


Belfius Bank & Verzekeringen - Enterprise Architect Platforms & Infrastructure

Belfius Bank and Verzekeringen

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 28, 2024


Samen met een team van Enterprise Architecten bouw je mee aan de toekomst van Belfius Technology. Vanuit je engineering mindset moderniseer je bestaande technologieën en integreer je nieuwe zoals GenAI, Cloud, Data. Zo versterk je de resiliency en security van Belfius Bank, Insurance & Beyond met...


Microsoft Dynamics 365 Developer

Nationale Loterij

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Etterbeek

  • October 16, 2024


Jouw taken als Microsoft Dynamics 365 developer • Je zal mee programmeren aan Microsoft Dynamics 365, het schrijven van clean code. Tevens help je ook met code reviews, testing en debugging. • Je ontwikkelt en onderhoudt zowel de front end (JavaScript) als de backend componenten van het...


IT Service Resilience Manager

Argenta

  • BE - Vlaanderen - Vlaanderen - Antwerpen

  • October 11, 2024


Weet jij alles van IT resilience en disaster recovery? Word dan onze IT Service Resilience Manager en draag zo je steentje bij aan de Argenta business continuity strategie voor de toekomst. • Je bent verantwoordelijk voor het ontwikkelen, implementeren, documenteren, testen en bewaken van een...


Implementation Consultant Atlassian

Cegeka

  • BE - Vlaanderen - Vlaanderen - Diegem

  • October 31, 2024


CTG België, onderdeel van de Cegeka groep en Platinum Atlassian partner, is op zoek naar een gedreven Atlassian consultant. Heb jij kennis van de Atlassian tools en wil jij onze klanten helpen om het meeste uit hun Atlassian producten te halen? Dan hebben wij de opportuniteit voor jou! • Wat...


Field Engineer Fire

Johnson Controls


• Over de functie: • Als Installatietechnicus Brandbeveiliging bij Johnson Controls ben je een onmisbare schakel in ons team. Je werkt zelfstandig en komt terecht in ons portfolio van brandbeveiligingsproducten. Hier zul je je bezighouden met installatie en probleemoplossingstaken, met de nadruk op...


Commercial Manager Hospital m/f/x

Solventum


Thank you for your interest in working for our Company. Recruiting the right talent is crucial to our goals. On April 1, 2024, 3M Healthcare underwent a corporate spin-off leading to the creation of a new company named Solventum. We are still in the process of updating our Careers Page and applicant...


Belfius Bank & Verzekeringen - Data Analyst Technology

Belfius Bank and Verzekeringen

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 25, 2024


Het Corporate Office van de CTO is verantwoordelijk voor de strategische oriëntatie en de operationele ondersteuning van alle Technology afdelingen binnen de Belfius groep. • Binnen het Corporate Office van de CTO zijn we op zoek naar een data analyst die de corporate reporting naar een hoger...


Enterprise Architect Financial Markets

Belfius Bank and Verzekeringen

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 25, 2024


Samen met een team van Enterprise Architecten bouw je mee aan de toekomst van Belfius Technology. Vanuit je engineering mindset moderniseer je bestaande technologieën en integreer je nieuwe zoals GenAI, Cloud, Data. Zo versterk je de resiliency en security van Belfius Bank, Insurance & Beyond met...


Fullstack Architect

Cegeka

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Schaerbeek

  • October 9, 2024


Wij zoeken een Fullstack architect met zowel brede als diepe kennis, voor onze klant CM. Een architect die graag codeert of een software vakman met architecturale ervaring. Je kan vanuit de integratie requirements technische voorstellen doen, en je kunt deze vertalen naar een performante en...


Azure Integration Engineer

Nationale Loterij

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 31, 2024


Jij bent de brug die de verbinding maakt tussen de systemen • We zijn op zoek naar een nieuwe collega voor ons team om te helpen met het koppelen van verschillende systemen binnen ons bedrijf. Heb je interesse in technologie en vind je het leuk om oplossingen te bouwen die ervoor zorgen dat...


Belfius Bank & Verzekeringen - Senior Technology Engineer / Analyst Non - Life Insurance

Belfius Bank and Verzekeringen

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 23, 2024


Je realiseert samen met het team future proof technologie-oplossingen die betekenisvol zijn voor onze klanten en een meerwaarde zijn voor ons bedrijf. Het domein is non-life insurance, waarbij er vanuit de verschillende projecten een link is met Mobile, Data, AI of Cloud. • De job in een...


IT Test Manager

AG Insurance

  • BE - Bruxelles-Capitale - Bruxelles-Capitale - Bruxelles

  • October 28, 2024


Daarom kies je voor AG • Bij AG vinden we verzekeringen boeiend. Waarom? Omdat je mensen kan helpen om beter te leven. Omdat je op zoek gaat naar nieuwe trends. Omdat je klaar bent voor nóg een uitdaging. En dat allemaal doet in een moderne en stimulerende werkomgeving. Klaar voor een nieuw...


IT-Planet - DevOps Lead

IT Planet

  • BE - Flanders - Flanders - Leuven

  • October 3, 2024


Functieomschrijving • Als onderdeel van de reis naar DevOps en het voortdurend verbeteren van de Software Design & Development activiteiten, is de klant op zoek naar een Expert. • Ondersteuning bieden in het methodologische kader voor applicatie & data delivery • Ontwikkelen van de...


Senior System Engineer

SANDER

  • BE - Vlaanderen - Vlaanderen - Zaventem

  • October 30, 2024


Sluit je aan bij een dynamisch team waar jouw systeemengineering-vaardigheden de toekomst van bedrijven vormgeven die streven naar topkwaliteit en innovatie! • Onze partner is op zoek naar een ervaren System Engineer die de ICT-systemen en netwerken zal onderhouden om technische en...


System Engineering Teamlead

Experis

  • BE - Vlaanderen - Vlaanderen - Waregem

  • October 2, 2024


Onze partner is op zoek naar een System Engineering Teamlead om hun team van system engineers aan te sturen. Dit gerenommeerd bedrijf is gelegen in de regio Waregem en is gespecialiseerd in binnen- en buitenshuis bouwmaterialen. Ben je op zoek naar zo'n uitdaging? Lees dan zeker verder! • Jouw...


OPS Engineer Integratie

Argenta

  • BE - Vlaanderen - Vlaanderen - Antwerpen

  • October 11, 2024


Ben jij er ook van overtuigd dat integratie één van de belangrijkste uitdagingen is in de digitale transformatie die bedrijven doormaken? Ga je graag aan de slag met de IT-foundations en nieuwe technologie, maar begrijp je ook heel goed het strategische belang en mogelijkheden van integratie voor de...


KU - Full Stack Web Developer Back - End Focus

KU Leuven

  • BE - Vlaanderen - Vlaanderen - Leuven

  • October 23, 2024


De Groep Biomedische Wetenschappen is een toonaangevend academisch biomedisch centrum met een vooraanstaande rol op nationaal en internationaal niveau. Onze enthousiaste onderzoekers, briljante docenten en gedreven medewerkers koesteren grootse digitale toekomstdromen. Het webteam binnen de ICT...


Consultant Supply Chain Optimization

Sopra Steria

  • BE - Vlaanderen - Vlaanderen - Diegem

  • October 4, 2024


Sopra Steria offers tailored, end-to-end corporate technology and software solutions to help clients make bold choices and deliver results. Successfully so! With more than 56.000 colleagues in 30 countries, we rank as Europe's leading digital solutions provider. Some of the most successful companies...