DataOps Engineer F/H

Nous recrutons un·e DataOps Engineer afin de renforcer notre équipe Analytics. Il sera responsable de fournir des metrics au sein de l’entreprise.

Vous jouerez un rôle essentiel dans la garantie de la disponibilité, de la performance et de la fiabilité de nos pipelines d' analyse des données, dans une stack moderne basé sur spark, airflow et k8s, toutes déployées dans nos solutions de cloud IaaS. 

OUTSCALE, marque de Dassault Systèmes, est un opérateur souverain et durable de l’Expérience en tant que Service qui offre à ses clients des environnements technologiques de confiance. 

Nous offrons des expériences uniques grâce au savoir-faire de nos équipes passionnées, qui se reflète notamment par la création de solutions de Business Expériences, le développement de notre propre orchestrateur Cloud, TINA OS, ou encore l’obtention de la qualification SecNumCloud.

Vos missions

• Concevoir et maintenir des pipelines de données : Assurer le bon fonctionnement des pipelines de données développés par l'équipe, en utilisant des outils tels que Spark, Airflow et Superset.
• Gestion des sources de données : Intégrer et gérer des données provenant de diverses sources, en assurant leur qualité et leur cohérence.
• Monitoring et résolution des incidents : Mettre en place des outils de monitoring pour surveiller en temps réel l'état des pipelines, identifier les problèmes et les résoudre rapidement.
• Amélioration continue : Proposer et mettre en œuvre des améliorations pour optimiser les performances, la fiabilité et la sécurité de nos pipelines de données ainsi que de la stack technique utilisée.
• Documentation et support : Rédiger des manuels clairs et détaillés pour permettre à une équipe support de surveiller et de dépanner les pipelines.

Stack technique: 

• Spark, Airflow et Superset 
• Kubernetes et environnement cloud.
• CI/CD et les outils associés
• Python, bash / Systèmes d’exploitation : Linux, MacOS
• Outils de supervision: Zabbix, Prometheus, Grafana