Description du poste

📑 CDI (36 – 40K€) / Freelance / Portage Salarial – 🏠 2 jours de télétravail / semaine – 📍 Toulouse – 🛠 Expérience de 2/3 ans minimum

Rejoignez une équipe passionnée et boostez la transformation Big Data !🚀 

Nous accompagnons notre client pour renforcer une équipe spécialisée dans la gestion et l’industrialisation des traitements de données massifs et recherchons un.e Data Engineer. Vous interviendrez sur une plateforme Big Data dédiée à l’exploitation de larges volumes de données, utilisée pour des analyses avancées et des modèles prédictifs.

Votre défi à relever 🎯

En tant que Data Engineer, vous aurez un rôle clé dans la mise en place et l’optimisation des pipelines de données. Vous serez en interaction avec des équipes pluridisciplinaires (développeurs, data scientists, métiers) pour construire des solutions performantes et scalables.

Vos missions au quotidien 🛠

– Développer et optimiser des pipelines de données massifs avec Spark et Scala.

–  Assurer l’ingestion, le nettoyage et l’enrichissement des données en vue de leur exploitation.

– Exposer les données via des API et Web Services pour les rendre accessibles aux applications et modèles ML.

– Contribuer à l’industrialisation et à la mise en production des traitements Big Data.

– Collaborer avec les data scientists pour améliorer la maturité industrielle des modèles de machine learning.

– Maintenir et optimiser les solutions en production pour garantir leur performance et leur robustesse.

Votre environnement technique 🖥

– Langages : Java (J2EE / JDK 17), Scala

– Big Data : Spark (SQL/DataFrame), Impala, Kudu, Hive, SQL, Parquet

– Infrastructure & DevOps : Docker, Kubernetes, Helm, Git, Maven

– Messaging & Streaming : Kafka, Redis

– Tests & Qualité : JUnit, Mockito, PowerMock, ScalaMock

– API : Web Services Rest

Et pour réussir dans ce rôle ? ✨

– Vous avez entre 2 et 3 ans d’expérience en tant que Data Engineer.

– Vous maîtrisez Spark, Scala et l’écosystème Big Data.

– Vous avez des bases solides en développement backend et en conception de pipelines de données.

– Vous appréciez travailler en équipe et collaborer avec des profils variés (développeurs, data scientists, métiers).

– Une appétence pour le Machine Learning est un plus !

– Anglais courant indispensable pour évoluer dans un contexte international. 

📍 Situation géographique : Toulouse

🔔 Quelques infos importantes à retenir :

– Démarrage : ASAP

– Expérience de 2/3 ans minimum sur un poste similaire

– Télétravail 2 jours/semaine