Administration of Kafka Message Queue Schulung

Dieser Kurs richtet sich an Unternehmensarchitekten, Entwickler, Systemadministratoren und alle, die ein verteiltes Messagingsystem mit hohem Durchsatz verstehen und verwenden möchten. Wenn Sie spezifischere Anforderungen haben (z. B. nur Systemadministration), kann dieser Kurs besser auf Ihre Bedürfnisse zugeschnitten werden.

Apache Samza ist ein Open-Source-Framework für die asynchrone Stream-Verarbeitung in Echtzeit. Es verwendet Apache Kafka für Messaging und Apache Hadoop YARN für Fehlertoleranz, Prozessorisolation, Sicherheit und Ressourcenverwaltung.

Dieses von Lehrern geleitete Live-Training führt in die Prinzipien von Messaging-Systemen und der verteilten Stream-Verarbeitung ein und führt die Teilnehmer durch die Erstellung eines Samza-basierten Beispielprojekts und die Auftragsausführung.

Am Ende dieser Schulung können die Teilnehmer:

• Verwenden Sie Samza, um den Code zum Erstellen und Verarbeiten von Nachrichten zu vereinfachen.
• Entkoppeln Sie die Verarbeitung von Nachrichten aus einer Anwendung.
• Verwenden Sie Samza, um zeitnahe asynchrone Berechnungen durchzuführen.
• Verwenden Sie die Stream-Verarbeitung, um eine höhere Abstraktionsebene für Messagingsysteme bereitzustellen.

Publikum

• Entwickler

Format des Kurses

• Teilvorlesung, Teildiskussion, Übungen und viel praktisches Üben

Kafka Streams ist eine clientseitige Bibliothek zum Erstellen von Anwendungen und Mikrodiensten, deren Daten an ein und von einem Kafka-Messagingsystem übertragen werden. Traditionell hat sich Apache Kafka auf Apache Spark oder Apache Storm , um Daten zwischen Nachrichtenproduzenten und -konsumenten zu verarbeiten. Durch Aufrufen der Kafka Streams-API aus einer Anwendung heraus können Daten direkt in Kafka verarbeitet werden, ohne dass die Daten zur Verarbeitung an einen separaten Cluster gesendet werden müssen.

In diesem von Lehrern geführten Live-Training lernen die Teilnehmer, wie sie Kafka-Streams in eine Reihe von Java Beispielanwendungen integrieren, die Daten zur Stream-Verarbeitung an Apache Kafka und von diesem weitergeben.

Am Ende dieser Schulung können die Teilnehmer:

• Verstehen der Funktionen und Vorteile von Kafka Streams gegenüber anderen Frameworks für die Stream-Verarbeitung
• Verarbeiten Sie Stream-Daten direkt in einem Kafka-Cluster
• Schreiben Sie eine Java oder Scala Anwendung oder einen Microservice, der sich in Kafka und Kafka Streams integrieren lässt
• Schreiben Sie prägnanten Code, der Eingabe-Kafka-Themen in Ausgabe-Kafka-Themen umwandelt
• Erstellen, packen und implementieren Sie die Anwendung

Publikum

• Entwickler

Format des Kurses

• Teilvorlesung, Teildiskussion, Übungen und viel praktisches Üben

Anmerkungen

• Um ein individuelles Training für diesen Kurs anzufordern, kontaktieren Sie uns bitte, um dies zu arrangieren

In dieser von einem Trainer geleiteten Live-Schulung (vor Ort oder per Fernzugriff) lernen die Teilnehmer, wie sie verschiedene Stream Processing Frameworks mit bestehenden Big-Data-Speichersystemen und zugehörigen Softwareanwendungen und Microservices einrichten und integrieren können.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Installieren und Konfigurieren verschiedener Stream Processing Frameworks, wie Spark Streaming und Kafka Streaming.
• Das am besten geeignete Framework für die jeweilige Aufgabe verstehen und auswählen.
• Daten kontinuierlich, gleichzeitig und Datensatz für Datensatz verarbeiten.
• Lösungen mit bestehenden Datenbanken, Data Warehouses, Data Lakes usw. integrieren Stream Processing.
• Integrieren Sie die am besten geeignete Stream-Processing-Bibliothek in Unternehmensanwendungen und Microservices.

Diese Live-Schulung (vor Ort oder per Fernzugriff) richtet sich an Techniker, die Confluent (eine Distribution von Kafka) verwenden möchten, um eine Echtzeit-Datenverarbeitungsplattform für ihre Anwendungen zu erstellen und zu verwalten.

Am Ende dieser Schulung können die Teilnehmer:

• Installieren und konfigurieren Sie Confluent Platform.
• Verwenden Sie die Verwaltungstools und -dienste von Confluent, um Kafka einfacher auszuführen.
• Speichern und verarbeiten Sie eingehende Stream-Daten.
• Optimieren und verwalten Sie Kafka-Cluster.
• Sichere Datenströme.

Format des Kurses

• Interaktiver Vortrag und Diskussion.
• Viele Übungen und Übungen.
• Praktische Implementierung in einer Live-Laborumgebung.

Anpassungsoptionen für den Kurs

• Dieser Kurs basiert auf der Open Source-Version von Confluent: Confluent Open Source.
• Um ein individuelles Training für diesen Kurs anzufordern, kontaktieren Sie uns bitte, um dies zu arrangieren.

Apache Kafka ist eine verteilte Streaming-Plattform. Es ist de facto ein Standard für den Bau von Datenpipelines und löst viele verschiedene Anwendungsfälle im Bereich der Datenverarbeitung: Es kann als Nachrichtenwarteschlange, verteiltes Protokoll, Stream-Prozessor usw. verwendet werden.

Wir beginnen mit einer Theorie hinter Daten-Pipelines im Allgemeinen und fahren dann mit grundlegenden Konzepten hinter Kafka fort. Wir werden auch wichtige Komponenten wie Kafka Streams und Kafka Connect entdecken.

Dieses von einem Trainer geleitete Live-Training (online oder vor Ort) richtet sich an Entwickler, die eine herkömmliche Architektur in eine hochgradig konkurrierende, auf Microservices basierende Architektur umwandeln möchten und dabei Spring Cloud, Kafka, Docker, Kubernetes und Redis verwenden.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Einrichten der notwendigen Entwicklungsumgebung für den Aufbau von Microservices.
• Entwerfen und Implementieren eines hochkonkurrierenden Microservice-Ökosystems unter Verwendung von Spring Cloud, Kafka, Redis, Docker und Kubernetes.
• Transformieren Sie monolithische und SOA-Dienste in eine Microservice-basierte Architektur.
• Ein DevOps-Ansatz für die Entwicklung, das Testen und die Freigabe von Software anwenden.
• Hohe Gleichzeitigkeit zwischen Microservices in der Produktion sicherstellen.
• Microservices überwachen und Wiederherstellungsstrategien implementieren.
• Leistungstuning durchführen.
• Lernen Sie zukünftige Trends in der Microservices-Architektur kennen.

Diese von einem Ausbilder geleitete Live-Schulung (online oder vor Ort) richtet sich an Entwickler, die Apache Kafka in bestehende Datenbanken und Anwendungen zur Verarbeitung, Analyse usw. integrieren möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Nutzen Sie Kafka Connect, um große Datenmengen aus einer Datenbank in Kafka-Themen aufzunehmen.
• Protokolldaten, die von einem Anwendungsserver generiert werden, in Kafka-Themen aufnehmen.
• Die gesammelten Daten für die Stream-Verarbeitung verfügbar machen.
• Daten aus Kafka-Themen in sekundäre Systeme zur Speicherung und Analyse exportieren.

Diese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an Entwickler, die Apache Kafka Stream Processing implementieren möchten, ohne Code zu schreiben.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Installieren und konfigurieren Sie Confluent KSQL.
• Einrichten einer Stromverarbeitungspipeline nur mit SQL-Befehlen (keine Java- oder Python-Codierung).
• Datenfilterung, Transformationen, Aggregationen, Joins, Windowing und Sessionisierung vollständig in SQL durchführen.
• Entwerfen und Bereitstellen interaktiver, kontinuierlicher Abfragen für Streaming ETL und Echtzeit-Analysen.

Diese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an Systemadministratoren, die einen unternehmenstauglichen Kafka-Cluster einrichten, bereitstellen, verwalten und optimieren möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Einrichten und Verwalten eines Kafka-Clusters.
• Die Vor- und Nachteile der Bereitstellung von Kafka vor Ort und in der Cloud abwägen.
• Kafka in verschiedenen On-Premise- und Cloud-Umgebungen mit Hilfe von Tools bereitstellen und überwachen.

Diese von einem Ausbilder geleitete Live-Schulung (online oder vor Ort) richtet sich an Software-Tester, die Netzwerksicherheits maßnahmen in eine Apache Kafka-Anwendung implementieren möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Apache Kafka auf einem Cloud-basierten Server einrichten.
• Implementieren Sie SSL-Verschlüsselung, um Angriffe zu verhindern.
• Fügen Sie ACL-Authentifizierung hinzu, um den Benutzerzugriff zu verfolgen und zu kontrollieren.
• Sicherstellen, dass glaubwürdige Clients mit SSL und SASL-Authentifizierung Zugang zu Kafka-Clustern haben.

Diese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an Datenwissenschaftler, die den SMACK-Stack zum Aufbau von Datenverarbeitungsplattformen für Big-Data-Lösungen nutzen möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

• Implementierung einer Datenpipeline-Architektur zur Verarbeitung von Big Data.
• Entwickeln einer Cluster-Infrastruktur mit Apache Mesos und Docker.
• Daten mit Spark und Scala analysieren.
• Verwaltung unstrukturierter Daten mit Apache Cassandra.

Diese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an Dateningenieure, Datenwissenschaftler und Programmierer, die die Funktionen von Apache Kafka für das Datenstreaming mit Python nutzen möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein, Apache Kafka zu verwenden, um Bedingungen in kontinuierlichen Datenströmen mit Hilfe von Python Programmierung zu überwachen und zu verwalten.

Diese Live-Schulung unter Anleitung (online oder vor Ort) richtet sich an Dateningenieure, Datenwissenschaftler und Programmierer, die die Funktionen von Spark Streaming bei der Verarbeitung und Analyse von Echtzeitdaten nutzen möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein, Spark Streaming zu verwenden, um Live-Datenströme für die Verwendung in Datenbanken, Dateisystemen und Live-Dashboards zu verarbeiten.

Diese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an fortgeschrittene Entwickler, die Big-Data-Anwendungen mit Apache Kafka entwickeln möchten.

Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:

Entwicklung von Kafka-Produzenten und -Konsumenten zum Senden und Lesen von Daten aus Kafka. Integration von Kafka mit externen Systemen mit Kafka Connect. Schreiben Sie Streaming-Anwendungen mit Kafka Streams & ksqlDB. Integrieren Sie eine Kafka-Client-Anwendung mit Confluent Cloud für cloudbasierte Kafka-Bereitstellungen. Sammeln Sie praktische Erfahrungen durch praktische Übungen und reale Anwendungsfälle.