Data Engineer Java (H/F)

Rejoignez une mission stratégique au sein d'un environnement Big Data mature, où vous piloterez la conception et l'évolution de pipelines de données critiques pour un acteur majeur du secteur des télécommunications. Vous interviendrez sur l'ensemble du cycle de vie des données, de la collecte à la production, en traitant des volumes massifs (plusieurs téraoctets quotidiens) avec des fréquences variables et des exigences élevées de performance et de fiabilité. Vous évoluerez dans un contexte technique riche, basé sur une architecture Hadoop et Spark distribuée, où vous serez responsable du développement et de la maintenance de flux streaming et batch complexes. Votre expertise Java vous permettra de concevoir des solutions robustes et performantes, tandis que votre compréhension des enjeux d'optimisation et de scalabilité sera un atout majeur pour assurer le bon fonctionnement des traitements en production. La mission s'inscrit dans une démarche d'amélioration continue : vous travaillerez tant sur la stabilisation des architectures existantes que sur l'industrialisation des nouveaux indicateurs métier et la modernisation de la stack technique. Responsabilités : - Concevoir et développer des pipelines de données (streaming et batch) en Java et Spark, assurant la collecte, l'enrichissement et le stockage des données - Industrialiser les KPIs métier développés en Python par les équipes métiers : analyse fonctionnelle, refactoring, optimisation des performances et déploiement - Gérer et superviser le périmètre assigné, en assurant le bon fonctionnement et la fiabilité des flux en production - Effectuer le suivi et la maintenance des pipelines, en mettant en place des mécanismes de monitoring et d'alerte - Contribuer à la réduction de la dette technique : mises à jour de librairies, montées de version de Spark et frameworks associés, refactoring de code - Optimiser les configurations et les performances des traitements de données à haut volume - Collaborer avec les équipes métier et data science pour intégrer les évolutions fonctionnelles et technologiques Télétravail : 3 jours sur site Localisation : Nantes