Apache Spark Streaming (Modul 8)

Ziele

In dieser 2-tägigen Schulung "Apache Spark Streaming (Modul 8)" lernen Sie die leistungsstarke Lösung Spark Streaming kennen, um Daten in Echtzeit mit sogenannten Micro Batches zu verarbeiten. Das Konzept besteht darin, den permanenten Datenstrom in DStreams zu portionieren und als Kleinststapel in der Spark Engine zu verarbeiten. Sie machen sich mit dem Spark Streaming Konzept vertraut und üben die Verarbeitung von Daten aus verschiedenen Quellen wie Kafka mit Java. Zudem wird die Optimierung solcher Anwendungen behandelt.

Nach Abschluss des Kurses sind Sie in der Lage, Spark Streaming effizient einzusetzen und zeitnahe Datenverarbeitungsaufgaben erfolgreich zu bewältigen.

Zielgruppe

• (IT-)Architekt
• (IT-)Entwickler

Voraussetzungen

• Praktische Erfahrung in der IT-Informationsverarbeitung
• Kenntnisse in einer Programmiersprache, vorzugsweise Java, Scala oder Python
• Kenntnisse über Hadoop werden vorausgesetzt

Agenda

Wiederholung Einführung Spark

In dieser kurzen, einführenden Wiederholung werden die für die weiteren Ausführungen wichtigen Begriffe und Zusammenhänge aufgefrischt.

Modul 8: Spark Streaming

Spark Streaming ist eine Lösung, um in sogenannten Micro Batches Daten zeitnah verarbeiten zu können. Das ist zwar kein Ansatz, um im Hochgeschwindigkeitshandel bestehen zu können, aber allemal geeignet, um Daten im Sekundenbereich verarbeiten zu können.

Das Konzept von Spark Streaming besteht darin, den permanenten Datenstrom in sogenannten DStreams zu portionieren und jedes dieser Pakete als Kleinststapel in der Spark Engine zu verarbeiten.

Die Teilnehmer machen sich mit dem Konzept von Spark Streaming vertraut und üben, wie Daten beispielsweise aus Kafka mit Hilfe von Java verarbeitet werden können. Darüber hinaus wird auf die recht anspruchsvolle Thematik der Optimierung derartiger Anwendungen eingegangen.

Open Badge - Ihr digitaler Kompetenznachweis

Durch die erfolgreiche Teilnahme an einem Kurs bei IT-Schulungen.com erlangen Sie nicht nur Fachkenntnisse und Fähigkeiten, sondern bekommen zusätzlich zu Ihrem Teilnahmezertifikat ein Open Badge als digitalen Nachweis Ihrer Kompetenz.

Sie können diesen in Ihrem persönlichen und kostenfreien Mein IT-Schulungen.com Konto abrufen. Ihre verdienten Badges lassen sich problemlos in sozialen Netzwerken integrieren und weitergeben.

Mehr zu den Vorteilen von Badges

Kurz vor Durchführung