DataGen #244 - Qonto : Industrialiser sa Data Platform (Obvervabilité, Data Contracts, Automatisation, Self-Service)
16 snips
Jan 12, 2026 Victor Cumer, Data Engineering Team Lead chez Qonto, partage son expertise en stabilisation et industrialisation de plateformes data. Il évoque ses quatre chantiers clés : observabilité pour un suivi en temps réel, data contracts pour standardiser les interfaces, et l'automatisation pour minimiser les interventions manuelles. Victor parle également de l'importance du self-service pour permettre aux équipes d'opérer en autonomie. Enfin, il aborde les défis d’adoption et les prochaines étapes autour de la gouvernance des données.
AI Snips
Chapters
Books
Transcript
Episode notes
Standardiser Avec Un Data Contract
- Adoptez un standard open-source pour les data contracts et stockez-les comme source de vérité.
- Fournissez une interface (UI) pour créer et faire évoluer les contrats afin d'améliorer l'adoption.
Privilégier Une UI Guidée
- Ne restez pas seulement en ASCODE pour la configuration: fournissez une UI guidée pour réduire les erreurs.
- Utilisez des outils simples (ex. Streamlit) pour déployer rapidement une interface interne.
Automatiser Le Provisioning
- Automatisez le provisioning des pipelines à partir des data contracts pour scaler sans modifier le code.
- Faites vivre la configuration en production: le système doit s'adapter quand la config change.
