Data Engineer
il y a 14 heures
Paris
💼 CDI 🕑 Début : dès que possible 📍 Paris 🎓 +5 ans d'expérience 5 Degrés est une agence de conseil experte en Produit digital. Afin de répondre aux enjeux de nos clients et de leurs équipes, nous nous sommes organisés en 5 Practices qui couvrent l’ensemble de la chaine de création d’un Produit digital : • Product Management, • Product Design, • Product Development, • Product Quality, • Product Data/IA Nos collaborateurs interviennent chez des clients de tous secteurs d’activité, à la fois en BtoB, BtoC et BtoE, afin de concevoir et faire vivre des Produits digitaux durablement. Vos responsabilités incluront notamment : En tant que Data Engineer, vous accompagnez nos clients dans la conception et le déploiement de plateformes data robustes et scalables en environnement cloud. Vous interviendrez sur des projets à fort enjeu autour de l'architecture data, du traitement distribué et de l'orchestration de pipelines, dans des contextes variés et des secteurs d'activité multiples. Vos missions incluent notamment : • Analyser les besoins métiers et traduire les exigences fonctionnelles en architectures data adaptées aux contraintes de performance, de scalabilité et de production., • Concevoir et maintenir des pipelines de données de bout en bout (temps réel et batch), couvrant l'ingestion, la transformation, l'enrichissement et la mise à disposition des données., • Concevoir et optimiser des modèles de stockage et d'accès aux données en s'appuyant sur des architectures modernes (Lakehouse, Data Warehouse, Data Lake)., • Développer des pipelines de traitement distribués à l'aide de frameworks tels qu'Apache Spark ou Apache Flink., • Mettre en place des architectures de streaming temps réel (Kafka, Kinesis, Pub/Sub...) pour répondre aux besoins de traitement à faible latence., • Développer des services et des API pour exposer et valoriser les données auprès des équipes consommatrices., • Mettre en place des workflows d'orchestration (Airflow, Dagster...) et garantir la qualité, l'observabilité et le monitoring des données sur l'ensemble de la chaîne., • Déployer et gérer les infrastructures data via des approches Infrastructure-as-Code (Terraform, Terragrunt) sur des environnements cloud AWS, GCP ou Azure., • Appliquer les bonnes pratiques de CI/CD, de MLOps et de DataOps pour assurer la fiabilité et la maintenabilité des solutions livrées., • Collaborer avec les Data Analysts, Data Scientists, équipes produit et ingénieurs afin de permettre des cas d'usage analytiques à haute valeur ajoutée., • Partager une veille technologique active sur les évolutions des plateformes data cloud, des architectures modernes et des outils de l'écosystème data. Qui vous êtes : • Au moins 5 ans d'expérience en Data Engineering, avec une forte exposition aux environnements cloud et de production, • Expertise confirmée en Python et/ou Scala, • Expérience avérée sur au moins un environnement cloud majeur : AWS (S3, Lambda, Glue, Kinesis, Redshift, EMR...), GCP (BigQuery, Dataflow, Pub/Sub, Composer...) ou Azure (Data Factory, Synapse, Event Hubs, Databricks...), • Maîtrise des architectures Data Lake, Data Warehouse et/ou Lakehouse (Delta Lake, Iceberg, Hudi...), • Expérience sur des plateformes de traitement distribué : Apache Spark, Apache Flink, • Bonne maîtrise des outils d'orchestration (Airflow, Dagster, Prefect...), • Expérience en streaming temps réel (Kafka, Kinesis, Pub/Sub...), • Compétences en Infrastructure-as-Code (Terraform / Terragrunt) et en pratiques CI/CD / DevOps, • Maîtrise des bases de données relationnelles (SQL) et des moteurs de requêtage distribués, • Connaissance des enjeux de gouvernance, qualité et observabilité des données (Great Expectations, Monte Carlo, dbt...), • Bonne pratique des API REST et des architectures orientées services, • Familiarité avec les méthodes agiles et les environnements orientés livraison continue, • Bonnes aptitudes en communication et capacité à collaborer avec des interlocuteurs variés (métiers, produit, infrastructure) Ce que nous vous offrons : • Des locaux en plein cœur de Paris (2ème arrondissement)., • Une organisation en Practices favorisant la montée en compétence, le partage d’expérience et l’innovation., • Un système qui récompense votre implication avec la possibilité d’évoluer sur différents rôles en interne (Practice Leader, Squad Leader, rédaction d’articles…), • Un management de proximité et un suivi de carrière personnalisé grâce à notre accompagnement tri partite (RH, Business Manager, Practice Leader) aux formats variés : déjeuners, points formels, cafés…, • Des formations individualisées et adaptées à chaque parcours ainsi que l’accès en illimité à la plateforme Udemy (e-learning)., • Un environnement de travail dynamique et accueillant (soirées annuelles, afterworks, meet-ups, des activités sportives) mais aussi responsable et engagé (actions en faveur de la RSE)., • Des avantages salariaux : tickets restaurants, mutuelle d’entreprise/prévoyance, accès au Comité d’Entreprise (CE). Le choix entre le remboursement de votre abonnement de transport ou la possibilité de souscrire à un forfait mobilité verte. Ainsi que l’accès à la plateforme solidaire, Solikend, pour la réservation d’hôtels à tarifs avantageux., • Un accès à des tarifs préférentiels sur les abonnements Wellpass (Ex Gymlib) pour profiter de plus de 6 000 partenaires sport et bien-être partout en France et en Belgique. Processus de recrutement : Notre processus de recrutement est rapide et transparent : • Rapide premier échange téléphonique avec un membre de l’équipe interne (10 min), • Entretien avec un(e) RH (45 min), • Entretien avec un(e) Business Manager (45 min), • Echange avec un collaborateur de la Practice Product Management (30 min), • Dernier entretien avec l’un des Associés pour échanger sur la vision de 5 DEGRES (30 min)