Buat arsitektur sistem end-to-end untuk memproses dan menganalisis data skala petabyte yang mencakup injeksi data, pemrosesan batch dan streaming, serta analisis real-time. Jelaskan pilihan teknologi Anda (seperti Hadoop, Spark, Flink, atau alternatif lainnya) dan justifikasi mengapa pendekatan Anda cocok untuk kasus penggunaan tertentu. Diskusikan strategi untuk menangani tantangan seperti keandalan, skalabilitas, latensi, dan keamanan data dalam lingkungan distribusi.