Artikel
Cari bacaan berdasarkan topik dan tingkat, dari alur pertama hingga pemulihan pipeline.
Filter dan tampilan
9 artikel · Semua topik · Semua tingkat · Terbaru · Halaman 1/2
Merancang Pipeline yang Idempoten dan Andal
Gunakan kunci bisnis dan revisi sumber agar pembaruan tujuan aman saat batch diputar ulang.
Memahami Event Streaming dengan Kafka
Pahami urutan partisi, consumer group, offset, dan pengiriman ulang melalui log kejadian kecil.
Transformasi Data yang Teruji dengan dbt
Hubungkan model melalui ref, uji kunci bisnis, lalu tinjau ketepatan pemrosesan inkremental secara terpisah.
Menjadwalkan Pipeline dengan Apache Airflow
Atur dependensi dan percobaan ulang terbatas sambil menjaga publikasi batch aman untuk diulang.
Memahami Pemodelan Dimensi dan Star Schema
Tentukan grain fakta penjualan sebelum menggabungkan dimensi dan menjumlahkan pendapatan.
Membangun Pipeline ETL dengan Python
Baca CSV kecil, tolak amount yang tidak valid secara jelas, lalu tulis hasil JSON Lines yang dapat diulang.
SQL untuk Membersihkan Data Transaksi
Rapikan identifier kosong, pilih revisi transaksi secara deterministik, lalu cocokkan jumlah baris penolakan.
Mengenal Data Engineering dan Alur Kerjanya
Ikuti perjalanan transaksi contoh dari sumber hingga tabel yang siap dianalisis.