Schulungsübersicht
Einführung in Google Colab und Apache Spark
- Überblick über die Funktionen von Google Colab
- Grundlagen zu Apache Spark
- Einrichtung von Spark in der Umgebung von Google Colab
Datenverarbeitung mithilfe von Apache Spark
- Arbeiten mit RDDs sowie DataFrames
- Einlesen und Auswerten umfangreicher Datensätze
- Abfragen strukturierter Daten mittels Spark SQL
Fortgeschrittene Analyseverfahren mit Spark
- Machine Learning durch Einsatz von Spark MLlib
- Durchführung von Echtzeit-Analysen
- Verteilte Berechnungen mit Hilfe von Spark
Visualisierung und Zusammenarbeit in Google Colab
- Integration bekannter Visualisierungsbibliotheken in Colab
- Gemeinsame Arbeitsabläufe mithilfe von Colab-Notebooks
- Weitergabe sowie Export der Ergebnisse
Optimierung von Big-Data-Arbeitsabläufen
- Leistungsoptimierung von Spark-Einstellungen
- Verwaltung des Speicher- und Arbeitsspeicherausgangs optimieren
- Skalierung der Workflows für extrem große Datenmengen
Big Data in Cloud-Umgebungen
- Verknüpfung von Google Colab mit weiteren cloudbasierten Werkzeugen
- Nutzung des Cloud-Speichers zur Datensicherung
- Arbeiten mit Spark in verteilten Cloud-Umgebungen
Fallstudien sowie bewährte Praktiken
- Beispiele aus der Praxis zur Anwendung von Big Data
- Beispielhafte Projekte unter Einsatz von Apache Spark und Colab
- Empfehlungen für effiziente Big-Data-Analysen
Zusammenfassung sowie weitere Schritte
Voraussetzungen
- Grundkenntnisse in Konzepten der Datenwissenschaft
- Vertrautheit mit Apache Spark
- Kenntnisse in der Python-Programmierung
Zielgruppe
- Datenwissenschaftler
- Dateningenieure
- Forscher, die mit großen Datenmengen arbeiten
Erfahrungsberichte (3)
Das Wissen, dass QGIS und ein Tool, das von anderen verschiedenen Fachleuten wie Landvermessern verwendet werden kann,
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Kurs - QGIS for Geographic Information System
Maschinelle Übersetzung
Wie man offene Satellitendaten für reale Anwendungen nutzt
Tshering Dorji - Druk Holding and Investments
Kurs - Advanced Geographic Information Systems (GIS)
Maschinelle Übersetzung
Praktische Beispiele ermöglichten es uns, das Programm wirklich kennenzulernen. Gute Erklärungen und die Integration theoretischer Konzepte sowie deren Bezug zu praktischen Anwendungen wurden sehr geschätzt.
Ian - Archeoworks Inc.
Kurs - ArcGIS Fundamentals
Maschinelle Übersetzung
