Senior Data Engineer
March 15
Airflow
Amazon Redshift
Ansible
Apache
AWS
ETL
Java
Kafka
Kubernetes
Python
Scala
Spark
SQL
Tensorflow
Terraform
TypeScript
Go
Description
• Contribuer à l'enrichissement de la Data Platform (ETL) • Améliorer la robustesse de nos pipelines de production pour nos applications Machine Learning (inférence real time etc.) • Partager ses connaissances et présenter les travaux devant toutes les équipes Labs • Participer à la définition et à l’implémentation d’une architecture performante, robuste, scalable et aux coûts maîtrisés pour nos applications Spark ainsi que pour nos pipelines de production de Machine Learning (évaluation des feature stores, refactoring de DAG Airflow) • Accompagner les Data Scientists lors de leur mise en production (relecture de code, pair programming) et mettre en place les best practices • Optimiser et améliorer la CI/CD de l’équipe en collaboration avec l’équipe SRE • Assurer la montée en compétence des membres de l’équipe sur les sujets de MLOps et Data Engineering • Réfléchir à la meilleure façon d'intégrer les données Google Analytics dans la data platform
Requirements
• Vous êtes passionné(e) par la data et les technologies modernes permettant d'en tirer partie • Vous vous intéressez à la data science et avez des connaissances générales sur les algorithmes de Machine Learning • Vous avez un background en développement et avez évolué dans un environnement Data • Vous avez a minima 4 ans d’expérience en environnement Machine Learning et/ou Data • Vous avez mis en production avec succès des applications Big Data faisant appel à du Machine Learning, du NLP, du traitement d’images dans des projets d'envergure, à fort volume de données • Votre maîtrisez Python, êtes un pro des frameworks data de la fondation Apache et êtes à l'aise dans un environnement AWS • Vous maîtrisez au moins un outil d'orchestration (Airflow, Data Pipeline ou tout autre outil similaire) • Vous présentez vos travaux de manière simple et accessible • Vous faîtes preuve d'un bon relationnel et vous aimez mentorer des collaborateurs • Vous parlez couramment anglais et français • Vous avez une expérience significative dans le domaine du e-commerce • Vous avez déjà mis en place un Data Lake, Data Warehouse ou une Data Platform • Vous avez déployé des applicatifs en environnement Kubernetes • Vous avez mis en place des pipelines d'ingestion de données avec une approche CDC à l'aide de Debezium ou autre • Vous maîtrisez Java/Scala
Benefits
• Des projets data driven, divers et variés (traitements massifs d’images, de textes, time series etc.) pour des produits différents de Mirakl • Une culture orientée sur la veille technologique • Des projets qui ont un vrai impact business devant être déployés sur des centaines de clients dans un contexte multilingue
Apply Now