🏠 Strona Główna
Benchmarki
📊 Wszystkie benchmarki 🦖 Dinozaur v1 🦖 Dinozaur v2 ✅ Aplikacje To-Do List 🎨 Kreatywne wolne strony 🎯 FSACB - Ostateczny pokaz 🌍 Benchmark tłumaczeń
Modele
🏆 Top 10 modeli 🆓 Darmowe modele 📋 Wszystkie modele ⚙️ Kilo Code
Zasoby
💬 Biblioteka promptów 📖 Słownik AI 🔗 Przydatne linki
Avancé

Conception de Pipeline IoT vers Data Lake

#Cloud #Big Data #Architecture #Kafka

Architecture backend pour ingérer, traiter et stocker des flux de données massifs.

Agis en tant qu'architecte de données Cloud. Conçois l'architecture d'un pipeline capable d'ingérer 100 000 messages par seconde provenant de compteurs intelligents. La solution doit être déployée sur AWS. Définis le flux de données depuis le gateway IoT jusqu'au stockage froid (S3 Glacier). Inclut les composants suivants dans ta proposition : gestion du back-pressure (KMS ou Kinesis), processing stream pour le nettoyage des données en temps réel (Flink ou Spark Structured Streaming), et stratégie de partitionnement des données (parquet/avro) pour optimiser les coûts et les requêtes analytiques ultérieures.