Data Ingénieur - Expert Spark H/F

Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group.

Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l’humain et la responsabilité sociétale au cœur de ses valeurs.

Data Ingénieur - Expert Spark H/F

Vous êtes passionné·e par les architectures de données à grande échelle et le traitement temps réel ? Ce poste est fait pour vous.

En tant qu' Expert Spark Data Engineer , vous êtes responsable de l'analyse, de l'optimisation et de l'évolution de notre pipeline de données au cœur de notre écosystème BI et statistiques.

Côté build

Conception et préconisations d'architecture

• Réaliser l'analyse et l'état des lieux technique de la solution existante (Kafka Connect, Spark, Kubernetes, MongoDB sur OVH)

• Produire les préconisations d'amélioration du Spark streaming pour le traitement temps réel

• Définir le dimensionnement infrastructure adapté au streaming temps réel (350 bases, 5 000 req/s, 1 To/an)

• Proposer une stratégie de dimensionnement MongoDB et de structuration de la donnée (standardisation des patterns)

• Rédiger le document d'architecture cible et le dossier de préconisations

Côté run

Optimisation et maintien en condition opérationnelle

• Assurer la fiabilité et la performance du pipeline de données en production sur l'infrastructure OVH

• Superviser les flux Kafka Connect et garantir la continuité du traitement des données entrantes

• Monitorer les performances Spark et intervenir sur les axes d'optimisation identifiés

• Veiller à la cohérence et à la qualité de la donnée stockée dans MongoDB

• Participer aux revues techniques et accompagner les équipes internes ENOVACOM dans la montée en compétences

C'est votre parcours

Vous avez au moins 5 ans d'expérience dans des environnements Data Engineering exigeants, avec une forte exposition aux architectures de traitement temps réel et à la gestion de volumétries importantes. Vous aimez diagnostiquer, optimiser et concevoir sans jamais cesser d'innover. Vous cherchez un cadre où vos idées comptent et où la technique va de pair avec la collaboration.

C'est votre expertise

• Apache Spark – maîtrise avancée du streaming et du batch, tuning et optimisation des performances

• MongoDB – modélisation, structuration de la donnée et bonnes pratiques de dimensionnement

• Kafka / Kafka Connect – conception et exploitation de pipelines de données en flux continu

• Déploiement Apache Spark sur Kubernetes – configuration, orchestration et gestion des ressources

• OVH Cloud – déploiement et exploitation d'infrastructures cloud dans un contexte de production

C'est votre manière de faire équipe

• Capacité d'analyse et de synthèse : vous transformez des états des lieux complexes en préconisations actionnables

• Rigueur documentaire : vos livrables (architecture cible, dossiers techniques) sont clairs et exploitables

• Posture conseil : vous savez challenger l'existant et proposer des axes d'amélioration concrets

• Esprit de collaboration : vous travaillez en proximité avec les équipes internes et partagez vos expertises

• Autonomie et sens des priorités dans un environnement technique à fort enjeu de performance

C’est notre engagement

Chez Consort Group, vous êtes un·e expert·e qu’on accompagne pour que chaque mission devienne une étape qui compte.

• Un onboarding attentif et humain

• Une vraie proximité managériale

• Des formations accessibles en continu

• Des engagements concrets : inclusion, égalité, solidarité

• Un package RH complet : mutuelle, carte TR, CSE, prévoyance

• Une culture du feedback et des projets qui font sens

C’est clair

Le process de recrutement : 

1. Un premier échange téléphonique avec notre team recrutement

2. Un entretien RH ainsi qu’un échange métier avec un.e ingénieur.e d’affaires

3. Un test ou un échange technique avec un.e de nos expert.es

4. Un dernier point avec votre futur.e manager ou responsable de mission

5. Et si on se reconnaît : on démarre ensemble

C’est bon à savoir

Lieu : Marseille
Contrat : CDI
Télétravail : Hybride
Salaire : De 40000€ à 45000€ (selon expérience) brut annuel
Famille métier : Data

Ce que vous ferez ici, vous ne le ferez nulle part ailleurs.
Ce moment, c’est le vôtre.