Fabric Notebooks cho kỹ thuật dữ liệu và PySpark

Kỹ thuật dữ liệu hiện đại đòi hỏi các môi trường dựa trên đám mây để xử lý các tập dữ kiện lớn hiệu quả. Fabric notebook kết hợp sức mạnh của Apache Spark với một không gian làm việc hợp tác để tối ưu hóa toàn bộ đường ống chuẩn bị dữ liệu của bạn. Lớp học dựa trên văn bản này hướng dẫn bạn từ các nguyên tắc cơ bản của kỹ thuật dữ liệu đám mây để viết các kịch bản chuyển đổi sẵn sàng sản xuất. Bạn sẽ hiểu cách kết nối với lakehouses, truy vấn dữ liệu bằng Spark SQL, và áp dụng các biến đổi phức tạp bằng PySpark, tất cả trong khi tuân theo các thực tiễn dữ kiện hiện đại. Bạn sẽ học được: 1. Hiểu kiến trúc cốt lõi của các cuốn sổ tay Fabric và định dạng Delta lakehouse. 2. Viết các truy vấn Spark SQL hiệu quả để lọc, tổng hợp và tham gia các tập dữ liệu lớn. 3. Apply PySpark DataFrames để thực hiện các biến đổi dữ liệu lập trình tiên tiến. 4. Cấu hình kết nối với các kho dữ liệu khác nhau, bao gồm cả hồ và kho. 5.Thực hiện các thực tiễn tốt nhất của kỹ thuật dữ liệu hiện đại, bao gồm thi hành sơ đồ và cấu trúc mã sạch. 6. Tối ưu hiệu suất máy tính để bàn để xử lý các nhiệm vụ xử lí dữ liệu quy mô lớn. Chương trình bắt đầu với các khái niệm cơ bản, giới thiệu bạn đến không gian làm việc Fabric và các thao tác cơ bản của notebook. Sau đó bạn sẽ tiến hành qua các bài học viết từng bước và các bài tập mã có cấu trúc dạy bạn cách đọc, chuyển đổi và viết dữ liệu. Lớp học này được thiết kế cho các kỹ sư dữ liệu, nhà phân tích dữ kiện và quản trị viên cơ sở dữ liêu mong muốn học chuyển đổi dữ lý đám mây. Không cần kinh nghiệm trước với Fabric hoặc Spark, mặc dù một hiểu biết cơ bản về SQL và Python là hữu ích. Bắt đầu đọc hôm nay để chuyển đổi dữ liệu chủ với Fabric notebooks.