Skalierbare Datenverarbeitung mit Scala und Spark

Dieser textbasierte Kurs führt Sie in die leistungsstarke Kombination von Scala und Spark ein, den branchenüblichen Technologien für die verteilte Datenverarbeitung und -analyse, die Ihnen die Möglichkeit bieten, Daten in einer Vielzahl von Anwendungen zu verarbeiten. Durch das Lesen unserer strukturierten Erklärungen und das Arbeiten mit praktischen Codebeispielen werden Sie vom Datenanfänger zum selbstbewussten Praktiker, der in der Lage ist, effiziente, verteilte Anwendungen zu schreiben. Sie erfahren, wie funktionale Programmierprinzipien die Datenmanipulation sicherer und intuitiver machen und wie Spark Cluster Computing koordiniert, um riesige Datensätze nahtlos zu analysieren. Was Sie lernen werden: - Verstehen Sie die grundlegenden Konzepte der funktionalen Programmierung in Scala, einschließlich Klassen, Merkmale und Musterabgleich. - Manipulieren Sie große Datensätze mit Spark DataFrames, Spark SQL und Resilient Distributed Datasets (RDDs). - Erstellen Sie skalierbare Datenpipelines, die strukturierte und unstrukturierte Daten transformieren, filtern und aggregieren. - Wenden Sie verteilte Algorithmen für maschinelles Lernen für Empfehlungen und Graphenanalysen mit den nativen Bibliotheken von Spark an. - Implementieren Sie moderne strukturierte Streaming-Muster, um Echtzeit-Datenfeeds bei ihrem Eingang zu verarbeiten. - Üben Sie das Schreiben von sauberem, modernem Scala-Code, der auf verteilte Computing-Umgebungen zugeschnitten ist. Der Kurs beginnt mit grundlegenden Programmierkonzepten in Scala, bevor Sie durch die Architektur, Datentransformationen und Machine-Learning-Anwendungen von Spark geführt werden.Sie werden schriftliche Erklärungen, konzeptionelle Aufschlüsselungen und codebasierte Übungen durchlaufen, die Ihr Verständnis verteilter Systeme festigen sollen. Dieser Kurs richtet sich an angehende Data Engineers, Analysten und Softwareentwickler, die Scala und Spark noch nicht kennen, da keine Vorkenntnisse in funktionaler Programmierung oder Big Data-Tools erforderlich sind. Beginnen Sie noch heute mit dem Lesen, um das Potenzial der großflächigen verteilten Datenverarbeitung zu erschließen.