How bintangx2005-netizen/eds-olist-customer-intelligence works
Ini adalah platform intelijen pelanggan Olist: ETL Python menggabungkan CSV transaksi dan cuaca, menerapkan pemeriksaan/pembersihan kualitas, membentuk warehouse bintang, lalu menyajikan analitik melalui dashboard Streamlit. README mendokumentasikan halaman Executive Overview, Customer 360/RFM, Pengiriman dan Review, Insight dan Rekomendasi, serta Monitor Data Quality. Relasi yang tidak tampak jelas pada cuplikan—terutama transformasi dan pemuatan bertahap—tidak diasumsikan sebagai panggilan terverifikasi.
Main entry points: run.py Orkestrasi ETL · db.py Akses PostgreSQL · verify.py Verifikasi hasil · weather.py Ambil cuaca
Components 18
Ingesti dan ETL
- Baca CSV
etl/extract.py - Ambil cuaca
etl/weather.py - Cuaca tersimpan
data/external/weather_state_daily.csv - Orkestrasi ETL
etl/run.py - Kualitas dan pembersihan
etl/quality.py - Topik review
etl/text.py - Fakta dan dimensi
etl/transform.py - Konfigurasi ETL
etl/config.py
Warehouse dan Mart
- Akses PostgreSQL
etl/db.py - Staging
- Warehouse dan ops
- Skema dan role
sql/01_schema.sql - View mart dan KPI
sql/02_views.sql
Analitik Produk
- Dashboard lima halaman
dashboard/app.py - Verifikasi hasil
etl/verify.py
Other components
- Pengguna analitik
- CSV Olist
- Open-Meteo
Connections 18
- Pengguna analitik → Dashboard lima halaman: menggunakan
README.md - CSV Olist → Baca CSV: dibaca sebagai CSV
etl/extract.py - Open-Meteo → Ambil cuaca: menyediakan cuaca
etl/weather.py - Ambil cuaca → Cuaca tersimpan: menyimpan CSV
etl/weather.py - Orkestrasi ETL → Baca CSV: memanggil ekstraksi
etl/run.py - Orkestrasi ETL → Ambil cuaca: memanggil cuaca
etl/run.py - Orkestrasi ETL → Kualitas dan pembersihan: mengukur dan membersihkan
etl/run.py - Orkestrasi ETL → Fakta dan dimensi: membangun warehouse
etl/run.py - Orkestrasi ETL → Akses PostgreSQL: mengakses database
etl/run.py - Orkestrasi ETL → Verifikasi hasil: menjalankan verifikasi
etl/run.py - Fakta dan dimensi → Topik review: menghitung topik
etl/transform.py - Akses PostgreSQL → Staging: memuat data mentah
etl/db.py - Akses PostgreSQL → Warehouse dan ops: menyalin tabel
etl/db.py - Skema dan role → Warehouse dan ops: mendefinisikan skema
README.md - View mart dan KPI → Warehouse dan ops: membaca warehouse
README.md - Dashboard lima halaman → View mart dan KPI: membaca view mart
dashboard/app.py - Verifikasi hasil → Warehouse dan ops: memeriksa baris
etl/verify.py - Verifikasi hasil → View mart dan KPI: memeriksa KPI
etl/verify.py