Schulungsübersicht
Einführung in Google Colab und Apache Spark
- Überblick über Google Colab
- Einführung in Apache Spark
- Einrichtung von Spark in Google Colab
Datenverarbeitung mit Apache Spark
- Arbeit mit RDDs und DataFrames
- Laden und Verarbeitung großer Datensätze
- Verwendung von Spark SQL für das Abfragen strukturierter Daten
Fortgeschrittene Analysen mit Spark
- Machine Learning mit Spark MLlib
- Echtzeit-Datenanalyse durchführen
- Verteilte Berechnungen mit Spark
Visualisierung und Zusammenarbeit in Google Colab
- Integration von Colab mit gängigen Bibliotheken zur Datenvisualisierung
- Kollaborative Arbeitsabläufe mit Colab-Notizbüchern
- Freigabe und Exportieren von Ergebnissen
Optimierung von Big-Data-Arbeitsabläufen
- Tuning von Spark für optimale Performance
- Optimierung des Speicher- und Speichernutzungsverhaltens
- Skalierung von Arbeitsabläufen für große Datensätze
Big Data in der Cloud
- Integration von Google Colab mit Cloud-basierten Tools
- Verwendung von Cloud-Speicher für Big Data
- Arbeit mit Spark in verteilten Cloud-Umgebungen
Fallstudien und Best Practices
- Überblick über reale Big-Data-Anwendungen
- Fallstudien unter Verwendung von Apache Spark und Colab
- Best Practices für Big-Data-Analysen
Zusammenfassung und weitere Schritte
Voraussetzungen
- Grundkenntnisse in Data-Science-Konzepten
- Vertrautheit mit Apache Spark
- Programmierkenntnisse in Python
Zielgruppe
- Data Scientists
- Data Engineers
- Forscher, die mit Big Data arbeiten
Erfahrungsberichte (3)
Wie man offene Satellitendaten für reale Anwendungen nutzt
Tshering Dorji - Druk Holding and Investments
Kurs - Advanced Geographic Information Systems (GIS)
Maschinelle Übersetzung
Übungen machen
Joe Pang - Lands Department, Hong Kong
Kurs - QGIS for Geographic Information System
Maschinelle Übersetzung
Praktische Beispiele ermöglichten es uns, das Programm wirklich kennenzulernen. Gute Erklärungen und die Integration theoretischer Konzepte sowie deren Bezug zu praktischen Anwendungen wurden sehr geschätzt.
Ian - Archeoworks Inc.
Kurs - ArcGIS Fundamentals
Maschinelle Übersetzung