تحليل البيانات العملي باستخدام بايثون وسبارك

هل تشعر بالإحباط من مجموعات البيانات التي هي كبيرة أو بطيئة جداً بالنسبة للأدوات التقليدية؟ تعلم كيفية تسخير قوة الحوسبة الموزعة لمعالجة كميات هائلة من المعلومات بكفاءة مع بايثون وأباتشي سبارك. تقدم هذه الدورة أساسا عمليا قائما على النص في باي سبارك، وترشدك من المفاهيم الأساسية إلى بناء وتشغيل تطبيقات تحليل البيانات في العالم الحقيقي. وستتدرب على تحويل البيانات الخام، وأداء التجميعات المعقدة، وبناء رمزك للتنفيذ القابل للقياس على الأنظمة الموزعة، وكل ذلك من خلال شروحات مكتوبة واضحة وتمارين عملية. ماذا ستتعلم: - فهم المفاهيم الأساسية لهندسة سبارك، بما في ذلك التنفيذ الموزّع والتقييم الكسول. - إتقان استخدام واجهة برمجة التطبيقات الحديثة DataFrame API لمعالجة البيانات المنظمة وفرزها وتجميعها بكفاءة. - بناء أنابيب عملية لمعالجة البيانات باستخدام مجموعة غنية من التحولات والإجراءات في PySpark. - الاستفسار عن مجموعات البيانات الكبيرة بطريقة تفاعلية باستخدام محرك Spark SQL القوي. - تعلم أساسيات معالجة البيانات في الوقت الحقيقي مع تدفق سبارك المنظم. - استكشاف أسس بنية نظام Lakehouse ومفاهيم تخزين البيانات المتعلقة بالمعاملات. - ممارسة إعداد وتشغيل تطبيقات سبارك على مجموعة من أجل الأداء القابل للقياس. تبدأ الدورة بالمصطلحات الأساسية والمبادئ الأساسية لسبارك قبل الانتقال إلى التمارين العملية مع أطر البيانات، و SQL، والتدفق. وستبني مهاراتك خطوة بخطوة، وتعدك للتصدي لتحديات البيانات المعقدة. هذه الدورة مصممة للمبتدئين، ولا تحتاج إلى خبرة سابقة مع أطر البيانات الضخمة أو الحوسبة الموزعة، على الرغم من أن الإلمام الأساسي بلغة بايثون سيكون مفيداً. ابدأ رحلتك في عالم تحليل البيانات الضخمة اليوم.