Data Engineer Spark Scala Confirmé E H/F

ScaleSquad Filiale du groupe Neurones IT :
faisons connaissance.
En tant qu'acteur du Service et du Cloud nous implémentons et manageons des solutions sur mesure pour les entreprises de taille intermédiaire.
Nos 10 années d'expériences ont forgé nos convictions :
le cloud est mature et totalement intégré dans les offres de transformation, il offre par ailleurs une plus grande flexibilité et une meilleure portabilité des applications et des données, le cloud est hybride (public, privé, multicloud).Au sein de la DSI Finance, nous recherchons un(e) Data Engineer Spark Scala confirmé(e) pour contribuer au chantier Assiette Comptable de Référence (ACR) dans le cadre d'un programme stratégique de transformation.Contexte :
Une organisation de premier plan a lancé un programme stratégique pluriannuel (2020 / 2025).
Une équipe dédiée a été créée pour la durée du programme.Ce programme s'articule autour des 4 principaux chantiers ci-dessous :
Mise en place d'une Assiette Comptable de Référence, certifiée et unique sur l'ensemble du périmètre, servant de référence pour les calculateurs et reportings Finance et Risques.Décommissionnement de la base de données actuelle des inventaires Finance et capitalisation sur le Datalake Finance & Risk.Mise en place d'une nouvelle plateforme globale de suivi des contrôles et de gestion des corrections (en se basant sur le streaming événementiel type Kafka).Optimisation et rationalisation du SI Finance, notamment sur la base de cette assiette comptable de référence.En particulier, le chantier "ACR" (Assiette Comptable de Référence) comprend trois sous-chantiers majeurs au sein du Datalake Finance et Risque :
Acquisition et complétion des données.Nouvelle modélisation des données orientée produit, répondant aux besoins des traitements, des calculateurs, et distribution des données.Mise en place d'un module de certification comptable, incluant un rapprochement plus rationalisé (Compta to BO to FO) et la centralisation du rapprochement des Comptes Statutaires & Consolidés.Les développements sur ce chantier s'appuient sur une plateforme Datalake Finance, basée sur une distribution Hadoop mutualisée, qui collecte les données des différents systèmes de synthèse afin de répondre aux nouveaux besoins de reporting Finances & Risques (ex.
:
réglementaires, analytiques, etc.).Au sein du chantier ACR, travaillant en mode Agile (SCRUM), la mission consistera à prendre part aux développements sur ce programme stratégique, tout en étant garant(e) de la pérennité et de la non-régression de l'outillage déjà en place, sur les deux sujets ci-dessous :
1) L'optimisation de la performance, temps d'exécution, utilisation des ressources machines afin de tenir les délais de traitement des informations et de leurs distributions vers les consommateurs avals (Calculateurs et reporting) dans le cadre des arrêtés mais également des besoins quotidiens.
Notamment afin de faire face à l'augmentation significative de la volumétrie de données sur S2 2024 et 2025 en lien avec les déploiements du chantier ACR.2) La contribution à la mise en place des outils de monitoring technique et fonctionnelle ; Profil recherché :
L'équipe est basée à La Défense mais a des ressources à l'étranger également.
L'anglais est donc obligatoire.
Dans ce cadre, nous recherchons un Data Engineer Spark Scala confirmé (5-9 ans d'expérience) disposant des compétences ci-dessous :
Expérience significative sur des travaux d'optimisation de la performance, temps d'exécution des traitements dans la distribution des données basées sur une plateforme de distribution Cloudera Hadoop (cluster on premise) ; Expérience dans la mise en œuvre de technologies et frameworks Big Data et NoSQL (Hadoop, Kafka, Spark, Scala, Hive, SolR, HBase, Kerberos) ; Expérience de travail dans un environnement Agile; avec outils et méthodologies associés (Confluence, Jira, Scrum, Kanban).
Compétences techniques requises :
Spark / Scala :
confirmé ; Kafka :
Très bonne connaissances ; A l'aise avec le programmation fonctionnelle (connaissance des librairies ZIO, MONIX, CATS appréciée).
Compétences relationnelles :
• Curiosité, agilité d'esprit, goût pour l'innovation ; - Capacité à s'organiser et travailler en autonomie, rigueur ; - Esprit d'équipe; - Esprit d'initiative, pro-actif ; - Capacité à comprendre les enjeux techniques nombreux sur le projet et dialoguer avec les autres développeurs ; -Bonne communication orale et écrite (Français et Anglais).L'environnement au sein de ScaleSquad :
Dans notre PME, nous cultivons un environnement collaboratif où chacun, quel que soit son poste, reste en contact direct avec ses collègues ainsi que toute la ligne hiérarchique.
Nos managers et chefs d'équipe sont d'anciens collaborateurs qui ont gravi les échelons, ce qui leur permet de comprendre et d'accompagner au mieux chaque membre de l'équipe.
Ici, l'empathie et la flexibilité sont des valeurs clés au quotidien.Nous sommes également engagés dans un accord d'égalité professionnelle, avec une attention particulière pour l'intégration et le bien-être des femmes dans un secteur historiquement masculin.
Les comportements et remarques sexistes n'ont pas leur place chez nous :
tout le monde doit se sentir respecté et valorisé.Nous croyons en la méritocratie !Chez nous, ce sont vos performances qui déterminent votre progression salariale.
L'ancienneté ne prime pas :
chacun a les mêmes chances d'obtenir une augmentation basée sur son travail et ses résultats.
Vous êtes maître de votre évolution !Nos avantages :
CSE ; Participation ;Jusqu'à 3 jours de télétravail (à définir avec votre manager) ; Carte Tickets-Restaurant EDENRED chargée à hauteur de 9€ (5€40 pris en charge par l'entreprise) par jour travaillé ; Centre de formation propre au groupe Neurones (Edugroupe), qui nous permet de vous proposer des formations et/ou certifications accessibles tout au long de l'année et récompensées en fin d'année ; JRTT annualisésdont le nombre calculé chaque année est fonction des dispositions des jours fériés ; Prime de cooptation jusqu'à 1.500€ bruts versée lors de la validation de la période d'essai de votre coopté ; Mutuelle à 45.40€ par mois sur laquelle vous pouvez ajouter votre conjoint(e) et votre/ vos enfants ; Événements organisés tout au long de l'année ; Transports prisen charge à hauteur de 50% sur justificatif.Envie de rejoindre une entreprise à taille humaine où vos efforts seront reconnus et récompensés ? Nous avons hâte de découvrir votre talent, alors n'attendez plus et postulez !Conformément à la réglementation, tous nos postes sont ouverts au recrutement de travailleurs handicapés.