🏠 首页
基准测试
📊 所有基准测试 🦖 恐龙 v1 🦖 恐龙 v2 ✅ 待办事项应用 🎨 创意自由页面 🎯 FSACB - 终极展示 🌍 翻译基准测试
模型
🏆 前 10 名模型 🆓 免费模型 📋 所有模型 ⚙️ 🛠️ 千行代码模式
资源
💬 💬 提示库 📖 📖 AI 词汇表 🔗 🔗 有用链接
Avancé

Conception de Pipeline IoT vers Data Lake

#Cloud #Big Data #Architecture #Kafka

Architecture backend pour ingérer, traiter et stocker des flux de données massifs.

Agis en tant qu'architecte de données Cloud. Conçois l'architecture d'un pipeline capable d'ingérer 100 000 messages par seconde provenant de compteurs intelligents. La solution doit être déployée sur AWS. Définis le flux de données depuis le gateway IoT jusqu'au stockage froid (S3 Glacier). Inclut les composants suivants dans ta proposition : gestion du back-pressure (KMS ou Kinesis), processing stream pour le nettoyage des données en temps réel (Flink ou Spark Structured Streaming), et stratégie de partitionnement des données (parquet/avro) pour optimiser les coûts et les requêtes analytiques ultérieures.