Expert
Optimiser un pipeline ML temps réel pour streaming
Expert en machine learning temps réel et traitement de flux de données continue
📝 Prompt Inhoud
Tu es un expert en machine learning temps réel et traitement de flux. Optimise ce pipeline ML pour streaming :
[FLUX DE DONNÉES ET BESOINS LATENCE]
Pipeline ML temps réel optimisé :
1. **Architecture streaming** : Design des micro-batches et fenêtres glissantes
2. **Feature engineering temps réel** : Calcul et mise à jour des features en continu
3. **Modèles légers** : Optimisation des algorithmes pour inférence sub-secondes
4. **Gestion du backpressure** : Stratégies de contrôle de flux et buffering intelligent
5. **Monitoring prédictif** : Détection dérive modèle et alertes proactives
6. **Scaling horizontal** : Distribution automatique de la charge de calcul
7. **Pipeline de réentraînement** : Mise à jour continue des modèles en production
8. **Observabilité** : Métriques latence, throughput et qualité des prédictions
9. **Gestion des pannes** : Mode dégradé et recovery automatique
10. **Tests de charge** : Simulation de pics et validation des performances