Databricks Asset Bundles for Data DevOps

Quản lý các luồng dữ liệu bằng cách nhấn tay thường dẫn đến sự không nhất quán và lỗi triển khai. Chuyển sang mô hình Dự án như mã cho phép bạn tự động hóa không gian làm việc và đảm bảo mỗi bản phát hành đều có thể dự đoán và lặp lại. Lớp học này cung cấp một con đường rõ ràng để làm chủ Databricks Asset Bundles, cho phép bạn gói các tập tin, công việc và cơ sở hạ tầng vào một gói duy nhất, có phiên bản. Bạn sẽ có được kỹ năng để chuyển từ phát triển địa phương sang các đường ống giao hàng tự động hoàn toàn, đảm bảo các dự án kỹ thuật dữ liệu của bạn đáp ứng các tiêu chuẩn sản xuất. Bạn sẽ học được: - Hiểu các nguyên tắc cốt lõi của khung dự án như mã và chu kỳ sống gói. - Định nghĩa và quản lý cấu hình không gian làm việc bằng cấu trúc YAML tiêu chuẩn. - Apply modern testing practices with pytest to ensure code quality before deployment. - Cấu hình môi trường đa giai đoạn để tách biệt phát triển, chuẩn bị và sản xuất. - Tự động xác minh và triển khai bằng cách sử dụng GitHub Actions và các công cụ CI / CD tích hợp. - Quản lý Delta Live Tables và các phụ thuộc công việc phức tạp thông qua các gói cấu trúc. Chương trình bắt đầu với thuật ngữ cơ bản và thiết lập môi trường trước khi tiến hành cấu hình gói và tự động hóa. Bạn sẽ khám phá cách xử lý các kịch bản thế giới thực, bao gồm các đường ống ETL và các nhiệm vụ phát trực tiếp, tất cả thông qua một cách tiếp cận tập trung vào mã. Chương trình này được thiết kế cho người mới bắt đầu tìm kiếm để áp dụng các thực hành DevOps trong kỹ thuật dữ liệu; không cần kinh nghiệm trước đó với gói tài sản. Bắt đầu đọc để xây dựng các đường ống dữ kiện đáng tin cậy và tự động hơn.