Dans le cadre de notre croissance et de la structuration de notre équipe Data, nous recherchons un·e Data Engineer basé·e à Lyon pour assurer la pérennité, le développement de nos solutions d'intégration de données, de traitement et de reporting.
🤝 Tu travailleras en étroite collaboration avec :
Nicolas, Team Lead Data, ton manager
L’équipe Produit & Développement
Guillaume, ML / Data Engineer
Stack :
- Data Platform → Databricks (Azure) + PySpark + Git
- Backend → Django + PostgreSQL
- Search Engine → Elasticsearch
- Reporting → Power BI
- Volumétrie Quotidienne → De l'ordre du Go (Gigaoctets)
Tes missions :
1. Contribuer au traitement des données Vizcab pour alimenter nos fonctionnalités produits et soutenir notre croissance (60 %) :
Maintenir et améliorer nos pipelines batch traitant les Déclarations Environnementales de Produits (EPD) pour renforcer la satisfaction client (NPS) sur les marchés français et internationaux.
Développer de nouveaux pipelines BI (basés sur des Data Warehouses) pour les marchés internationaux et concevoir des rapports utilisateurs intégrés à nos solutions Vizcab.
Maintenir et développer des pipelines qui alimentent notre Elasticsearch (Documents et Search applications).
2. Optimiser et enrichir notre stack data (30 %) :
Assurer le bon fonctionnement des pipelines en production tout en maximisant le ratio coût/performances.
Contribuer à des initiatives techniques alignées avec la roadmap produit en proposant des idées innovantes sur l’architecture, les librairies ou les process CI/CD.
Migrer du code depuis les systèmes legacy vers Databricks.
Définir et ajuster les bonnes pratiques de gouvernance pour intégrer nos équipes internes à Databricks (Product Managers, Experts, Data Analysts, Ingénieurs).
3. Améliorer notre moteur de recherche (10 %) :
