Jalur belajar
Baca sesuai urutan materi. Nomor menunjukkan urutan kurikulum; situs ini tidak melacak penyelesaian belajar.
Fondasi data engineering
PemulaIkuti perjalanan data dari sumber, pembersihan, dan ETL hingga model analitik.
Prasyarat
Mampu membaca tabel. Untuk latihan Python, siapkan Python 3 dan pemahaman fungsi dasar.
Hasil belajar
Jelaskan batas pipeline, bersihkan transaksi, bangun ETL kecil, dan bedakan fakta dengan dimensi.
Urutan bacaan
Ikuti perjalanan transaksi contoh dari sumber hingga tabel yang siap dianalisis.
Rapikan identifier kosong, pilih revisi transaksi secara deterministik, lalu cocokkan jumlah baris penolakan.
Baca CSV kecil, tolak amount yang tidak valid secara jelas, lalu tulis hasil JSON Lines yang dapat diulang.
Tentukan grain fakta penjualan sebelum menggabungkan dimensi dan menjumlahkan pendapatan.
Pipeline yang andal
Praktisi · Menengah hingga lanjutanHubungkan penjadwalan, pengujian transformasi, dan replay yang aman.
Prasyarat
Selesaikan jalur Fondasi atau kuasai SQL, fungsi Python, ETL, serta model dimensi.
Baca jalur FondasiHasil belajar
Baca dependensi DAG, tentukan pengujian model, dan rancang penulisan idempoten untuk pemulihan.
Urutan bacaan
Atur dependensi dan percobaan ulang terbatas sambil menjaga publikasi batch aman untuk diulang.
Hubungkan model melalui ref, uji kunci bisnis, lalu tinjau ketepatan pemrosesan inkremental secara terpisah.
Gunakan kunci bisnis dan revisi sumber agar pembaruan tujuan aman saat batch diputar ulang.