Ingénieur Data Senior – Migration et Administration Clusters (HDP/CDP, Cloud, Kubernetes, Spark, Airflow, Starburst)
Basé à Paris avec une présence de deux jours par semaine sur site, ce poste implique l’accompagnement et le maintien en conditions opérationnelles (MCO) des infrastructures HDP et CDP, dans un contexte de migration vers des services Data sur le Cloud. Le rôle intègre l’administration et l’optimisation de clusters, la gestion des mises à jour et des correctifs de sécurité, ainsi que la supervision des performances et l’optimisation des ressources.
- Administration et optimisation des clusters HDP/CDP : installation, configuration, maintenance.
- Gestion des mises à jour système et patchs de sécurité.
- Supervision et optimisation des ressources et performances.
- Gestion de clusters Kubernetes : administration, sécurisation et monitoring d’environnements conteneurisés (IKS, Openshift…).
- Automatisation des déploiements grâce aux Operators.
- Orchestration de workflows avec Apache Airflow : développement et optimisation des DAGs, gestion des dépendances et optimisation des temps d’exécution, intégration dans l’écosystème Data.
- Traitement et analyse des données avec Apache Spark : développement et tuning de jobs en batch ou streaming, intégration avec des systèmes distribués.
- Optimisation des requêtes et accès aux données distribuées avec Starburst (Trino) : configuration et administration, optimisation des requêtes SQL, gestion des accès sécurisés.
Le poste contribue directement à la transformation Data de l’entreprise, en facilitant la migration, la sécurisation et la performance des écosystèmes Big Data sur Cloud.
Nous recherchons des personnes passionnées par l’ingénierie des données, capables d’aborder des environnements techniques complexes et en constante évolution. Les candidats idéaux démontrent une grande rigueur dans l’administration d’infrastructures Big Data, ainsi qu’une solide curiosité pour les nouvelles technologies et l’automatisation.
- Expérience avérée dans l’administration de clusters HDP/CDP, avec une capacité à optimiser la performance de systèmes data avancés.
- Sens prononcé de la fiabilité et de la sécurité, pour gérer des environnements critiques et veiller à leur conformité, tout en anticipant les besoins de monitoring.
- Orientation solutions et esprit analytique permettant d’automatiser, d’optimiser les déploiements et d’orchestrer les workflows complexes grâce à des outils variés (Kubernetes, Airflow, Spark, Starburst).
- Appréciation de l’innovation et capacité à rester à la pointe des pratiques de migration et d’optimisation data dans des contextes cloud hybrides.
- Ouverture d’esprit et habitude de collaborer efficacement avec des équipes pluridisciplinaires, notamment lors de projets de transformation ou de migration technologique.
- Maîtrise du français à l’oral comme à l’écrit, pour communiquer aisément avec toutes les parties prenantes et documenter de manière claire les démarches engagées.
- Une expérience réussie sur des projets d’envergure en data engineering, et un réel engagement à apprendre en continu pour affiner son expertise technique et fonctionnelle.
Nous apprécions particulièrement les consultants à la fois autonomes et investis, capables d’anticiper les évolutions technologiques, tout en procurant un accompagnement fiable sur site et à distance.
Vergelijkbare banen
De perfecte match is nog maar één stap hiervandaan.
Stuur ons direct uw CV en wij brengen u in contact met een van onze gespecialiseerde recruiter die u zal begeleiden in de zoektocht naar uw droombaan!
Laatste artikels
Een succesvolle employer branding-strategie, in 7 stappen
Employer branding is essentieel voor elk bedrijf dat talent wil aantrekken én behouden. Er zijn tal van goede redenen om een sterk merk als werkgever uit te bouwen. Maar zoiets doe je niet van vandaag op morgen. Hoe pak je dat aan, starten met employer branding?
De strafste employer branding-trends van 2024
Employer branding is in sneltempo uitgegroeid tot een echte must voor werkgevers die het verschil willen maken, in de strijd om toptalent.
7 risico’s die jouw imago als werkgever beschadigen
Bedrijven investeren vandaag aanzienlijke budgetten in de marketing van hun merk als aantrekkelijke werkgever.
Sluit aan bij onze community van professionals en ontdek je potentieel om een verschil te maken in de wereld.
Blijf op de hoogte van het laatste nieuws.