Apache Storm

Ziele

In dieser 2-tägigen Schulung "Apache Storm" lernen Sie ein skalierbares System zur nahe Echtzeit-Datenverarbeitung kennen, das sowohl innerhalb als auch außerhalb eines Hadoop-Clusters betrieben werden kann. Der Kurs legt den Schwerpunkt auf das Zusammenwirken mit verschiedenen Komponenten des Hadoop-Ökosystems.

Zielgruppe

• (IT-)Architekt
• (IT-)Entwickler

Voraussetzungen

• Keine Voraussetzungen werden benötigt

Agenda

Strukturen – Die logische Sicht auf Storm

Storm ist in der Lage, einen Datenstrom (Stream) in einer Bolt zu manipulieren, die mit Adaptern (Spouts) von den Daten-Emittenten abgegriffen werden. Dieses Grundprinzip kann beliebig variiert werden.

Die Teilnehmer machen sich mit dem Grundprinzip vertraut und lernen erste Konzepte für die Lösung von Standard-Aufgaben kennen.

Parallelität und Prozesse – Die physische Sicht auf Storm

Storm arbeitet wie alle skalierbaren Systeme nach dem Master-Worker-Prinzip. Weitere Komponenten sind erforderlich, um die Transaktionssicherheit zu gewährleisten. Prozesse in Storm kapseln parallele Ausführungsschritte.

In diesem Abschnitt lernen die Teilnehmer Einzelheiten einer physischen Implementierung für Storm kennen und nutzen die Kommandozeile, um erste praktische Erfahrungen mit Storm zu sammeln.

Praxis 1 – Die Programmierung von Spouts

Üblicherweise werden Spouts entweder durch Erweiterung generischer Klassen um spezifische Merkmale oder auf der Basis spezifischer Interfaces implementiert.

Die Teilnehmer machen sich mit der Technik der Programmierung von Spouts vertraut und entwickeln eigene Lösungen.

Praxis 2 – Die Programmierung von Bolts

Üblicherweise werden Bolts entweder durch Erweiterung generischer Klassen um spezifische Merkmale oder auf der Basis spezifischer Interfaces implementiert.

Die Teilnehmer machen sich mit der Technik der Programmierung von Bolts vertraut und entwickeln eigene Lösungen.

Praxis 3 – Das Design einer Implementierung für Storm

Eine Topologie in Storm ist die Beschreibung des Ablaufs der Verarbeitung, die wiederum geeignet auf die zur Verfügung stehenden Ressourcen abzubilden ist.

In diesem Abschnitt modellieren die Teilnehmer anhand von Beispielen die erforderlichen Topologien und legen den Grad der Parallelisierung fest.

Praxis 4 – Betrieb von Storm im Hadoop Cluster

In diesem Abschnitt werden verschiedene Themen der Nutzung von Storm im Hadoop-Cluster ausführlich behandelt.

Die Teilnehmer machen sich mit praktischen Aspekten wie beispielsweise Verfügbarkeit und Ausfallszenarien von Storm oder dem Logging und Monitoring vertraut. Darüber hinaus wird das Sizing von Storm und ZooKeeper besprochen. Einen weiteren Schwerpunkt bildet die Abgrenzung zu Kafka, Spark Streaming und Flume.

Praxis 5 – Erweiterungen von Storm

Für Storm existieren Erweiterungen, von denen hier stellvertretend Trident sowie das Blobstore-API aufgezählt werden sollen.

Die Teilnehmer lernen die wichtigsten Erweiterungen für Storm kennen und sammeln praktische Erfahrungen mit Trident.

Open Badge - Ihr digitaler Kompetenznachweis

Durch die erfolgreiche Teilnahme an einem Kurs bei IT-Schulungen.com erlangen Sie nicht nur Fachkenntnisse und Fähigkeiten, sondern bekommen zusätzlich zu Ihrem Teilnahmezertifikat ein Open Badge als digitalen Nachweis Ihrer Kompetenz.

Sie können diesen in Ihrem persönlichen und kostenfreien Mein IT-Schulungen.com Konto abrufen. Ihre verdienten Badges lassen sich problemlos in sozialen Netzwerken integrieren und weitergeben.

Mehr zu den Vorteilen von Badges

Kurz vor Durchführung