(Inggris) Profil dan statistik Dimitar Berbatov di situs web resmi FIFA

Tim data modern memerlukan jalur yang dapat diandalkan, dikendalikan versi, dan diuji secara menyeluruh untuk mengubah data mentah menjadi wawasan yang dapat diterapkan. Kursus ini mengajarkan Anda bagaimana merancang dan mempertahankan arsitektur data bersih yang berskala tanpa serat. Dalam kursus ini, Anda akan belajar bagaimana membangun pipa transformasi data produksi dari nol. Anda akan berpindah dari menulis SQL mentah, tidak terorganisir ke mengembangkan model data modular, dapat digunakan kembali, dan sepenuhnya diuji menggunakan dbt Core dan dbt Cloud on Databricks. Apa yang akan kau pelajari: - Mengerti konsep dasar dbt, termasuk struktur proyek, konfigurasi dengan YAML, dan arsitektur data multi-lapisan Bronze-Silver-Gold. - Konfigurasi dbt untuk terhubung dengan Databricks menggunakan kedua dbt Cloud dan dbt Core lingkungan. - Bangun model data modular menggunakan SQL, templating Jinja, dan makro khusus untuk menulis logika transformasi kering, yang dapat digunakan kembali. - Implementasikan pemeriksaan kualitas data yang kuat menggunakan konfigurasi pengujian dbt modern dan paket utilitas pihak ketiga. - Terapkan strategi materialisasi canggih, termasuk beban inkrementil dan snapshot, untuk mengoptimalkan kinerja pipa dan melacak perubahan sejarah. - Integrasikan praktik terbaik kontrol versi untuk berkolaborasi dengan aman dan mempertahankan sejarah bersih perubahan pipa data Anda. Anda akan mulai dengan konsep rekayasa data inti dan pengaturan dbt sebelum bergerak langkah demi langkah melalui modeling, testing, dan tuning kinerja tingkat lanjut. Penjelasan tertulis dan potongan kode praktis memandu Anda dari awal proyek awal hingga menerapkan pipa yang tahan lama dan siap produksi. Kursus ini dirancang untuk insinyur data bercita-cita, insinyor analisis, dan analis data yang ingin membangun pipa data terstruktur. Tidak ada pengalaman sebelumnya dengan dbt atau Databricks diperlukan, meskipun pemahaman dasar SQL akan membantu. Mulai membangun pipa data yang lebih bersih dan lebih dapat diandalkan sekarang.