Ingénieur Data Ops (Hadoop/SCALA/ Spark)

Vous serez en charge d'assurer  l'exploitation quotidienne des environnements hors production. Vos missions consisteront à contribuer: • Assurer le Refresh des données sur les différents environnements • Assurer les installations applicatives (traitements Spark/Scala, ETLs Informatica, scripts sql Oracle, scripts shell, ...) • Synchronisation des environnements : versions applicatives, versions software, configurations et paramétrages • Monitoring et observabilité : Construire et maintenir un dashboard de monitoring des environnements (exécutions, volumes, ..) • Automatisation des procédures : Développer les outils/scripts nécessaires permettant de réduire l'effort manuel (contrôle automatique des écarts entre environnements, validation post-installation et refresh, conhérence des bdd ..) • Maintien en conditions opérationnelles : Exécution des jobs Spark, analyse des logs, contrôle des dépendances, suivi des batchs Opcon, relances des batch/jobs.