Ingénieur Big Data - Dataops H/F
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇
100 % Télétravail Possible Expérience de 5 ans minimum - Anglais professionnel requis Envie de rejoindre un environnement technique exigeant, où les enjeux de performance, de scalabilité et de fiabilité sont au coeur des projets ? Cette opportunité est faite pour vous ! Nous poursuivons notre développement et recherchons actuellement un.e Ingénieur Big Data / DataOps pour intervenir chez l'un de nos clients, acteur majeur du secteur des services. Votre environnement : Vous intégrerez une équipe en charge de plateformes Big Data à grande échelle, traitant des volumes de données pouvant atteindre plusieurs pétaoctets. Dans un environnement de production critique, vous contribuerez au déploiement, à l'industrialisation et à l'optimisation des infrastructures data, avec un objectif : garantir leur disponibilité, leur performance et leur fiabilité. Voici un aperçu de vos missions :- Déployer et administrer les plateformes Big Data sous Cloudera CDP / CDH, en environnement OpenShift.
- Industrialiser et automatiser les pipelines de données avec Apache Airflow, Spark et les outils CI/CD.
- Assurer le maintien en conditions opérationnelles des plateformes : analyser et résoudre les incidents de production N2/N3.
- Optimiser les performances des systèmes distribués : gestion des flux Kafka, optimisation HDFS et amélioration de la scalabilité.
- Mettre en place la supervision et l'alerting avec Centreon et Prometheus afin de garantir la disponibilité des services et le respect des SLA.
- Accompagner les équipes métiers dans les migrations, l'intégration et l'exploitation des solutions Big Data.
- 5 ans d'expérience minimum sur un poste similaire en environnement Big Data / DataOps.
- Très bonne maîtrise des environnements Cloudera CDP / CDH, Hadoop, Spark et Kafka.
- Expérience confirmée dans l'orchestration de pipelines avec Apache Airflow.
- Bonne connaissance des environnements conteneurisés OpenShift et Docker.
- Maîtrise des outils DevOps : Jenkins, Ansible et CI/CD.
- Compétences en scripting et automatisation avec Python et/ou Bash.
- Solides connaissances des environnements Linux, de la supervision et des problématiques de production.
- Anglais obligatoire
Emplois Recommandés
Infirmier regul psy - pole puma - h/f
Description entreprise : Situé à Bordeaux, le Centre Hospitalier Charles Perrens est un hôpital de recours et de référence à l’échelle de la Nouvelle Aquitaine dans le domaine de la psychiatrie et …
Chief Marketing Officer (F/H)
Le poste de Chief Marketing Officer (F/H) Rattaché à la Présidence et membre du Comité de Direction, vous construisez et pilotez la fonction marketing afin d'accompagner la croissance du groupe e…
Network DevOps Senior - Réseaux, Automatisation & Azure (H/F) (IT)
Contexte Dans le cadre du renforcement de son équipe d'ingénierie LAN et Datacenter, notre client recherche un Network DevOps Senior capable d'intervenir sur des infrastructures réseau complexes tout…
Formateur Commercial Lunettes Connectées F/H
L'entreprise MAGNITUDE est une agence spécialisée en Marketing Opérationnel. Elle accompagne les plus grandes marques (sport, mode, loisir, tech…) dans leur développement commerc…
Médecin libéral (H/F)
Le poste de médecin généraliste est à pourvoir dans un cabinet modernisé et équipé à Bordeaux. Vous bénéficierez d'une autonomie complète dans la gestion de votre activité, tout en profitant des syne…
Directeur d’agences H/F
L’entreprise Acteur reconnu du second œuvre du bâtiment, notre client intervient principalement dans des opérations de rénovation en site occupé, pour des bailleurs sociaux, des collectivités et d…
Auditeur (H/F)
L’intérêt du poste Au sein de l’équipe audit, tu interviendras sur des mandats variés (PME, groupes nationaux, secteurs divers : services, industrie, associations…). À ce titre, tu participeras n…
Responsable achat catégorie ingénierie HW & SW (H/F)
Lieu : Toulouse, France Construisons ensemble un avenir de confiance Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronaut…
Négociateur Immobilier H/F
En tant que Négociateur Immobilier pour Préférences IMMO Bordeaux , vous serez responsable de la prospection, de la négociation et de la vente de biens immobilier s. Votre rôle consistera à accom…
Homme/Femme toute main/ Bricoleur/Agent entretien bricolage/jardinage F/H
Description de l'entreprise Soyons fiers de notre métier ! Chez VIVASERVICES, nous savons qu’une personne épanouie dans son travail, c’est l’assurance d’un client satisfait et d’u…