🏠 홈
벤치마크
📊 모든 벤치마크 🦖 공룡 v1 🦖 공룡 v2 ✅ 할 일 목록 앱 🎨 창의적인 자유 페이지 🎯 FSACB - 궁극의 쇼케이스 🌍 번역 벤치마크
모델
🏆 톱 10 모델 🆓 무료 모델 📋 모든 모델 ⚙️ 킬로 코드 모드
리소스
💬 프롬프트 라이브러리 📖 AI 용어 사전 🔗 유용한 링크
advanced

Skrypt ETL w Pythonie z obsługą błędów i logowaniem

#Python #ETL #Data Engineering #Pandas #SQL

Tworzenie zaawansowanego skryptu ETL do ekstrakcji, transformacji i ładowania danych.

Napisz kompletny skrypt w języku Python, który realizuje proces ETL (Extract, Transform, Load). Skrypt ma pobierać dane z plików CSV zlokalizowanych w zdalnym katalogu SFTP, przetwarzać je przy użyciu biblioteki Pandas (czyszczenie danych, zmiana typów, usuwanie duplikatów, obsława wartości null), a następnie ładować je do bazy danych PostgreSQL przy użyciu SQLAlchemy. Kod musi zawierać zaawansowaną obsługę wyjątków (try-except-else-finally) dla każdego etapu, logowanie zdarzeń do pliku i konsoli (używając biblioteki logging) z różnymi poziomami ważności, a także mechanizm retry dla połączeń sieciowych. Opisz jak można uruchomić ten skrypt cyklicznie za pomocą crona.