Workflow Orchestration with Cloud Composer (WOCC)
Ziele der Schulung
In dieser 1-tägigen Schulung "Workflow Orchestration with Cloud Composer (WOCC)" lernen Sie Apache Airflow und dessen Implementierung über Cloud Composer kennen. Cloud Composer ist ein vollständig verwalteter Workflow-Orchestrierungsdienst, der auf Apache Airflow basiert. Mit Composer können Sie Workflow-Pipelines erstellen, planen, überwachen und verwalten, die sich über Clouds und lokale Rechenzentren erstrecken. Sie lernen, wie Sie Composer-Instanzen bereitstellen, Airflow-DAGs auf Composer erstellen und verwalten und Aufgaben wie das Testen, Debuggen und Überwachen von Airflow-DAGs durchführen.
Kursziele
- Erkunden Sie Apache Airflow und Cloud Composer als Lösungen zur Workflow-Orchestrierung.
- Erstellen und verwalten Sie Airflow-DAGs nach bewährten Verfahren.
- Testen und Debuggen von Airflow-DAGs.
- Airflow-DAGs auf Cloud Composer überwachen und beobachten
Zielgruppe Seminar
Dateningenieure, die lernen möchten, wie sie Apache Airflow und Cloud Composer für die Orchestrierung ihrer Data-Engineering-Workflows nutzen können.
Voraussetzungen
Abschluss von "Building Batch Data Pipelines on Google Cloud (BBDP)" oder gleichwertige Kenntnisse in Datenanalyse und -technik auf Google Cloud.
Lernmethodik
Die Schulung bietet Ihnen eine ausgewogene Mischung aus Theorie und Praxis in einer erstklassigen Lernumgebung. Profitieren Sie vom direkten Austausch mit unseren projekterfahrenen Trainern und anderen Teilnehmern, um Ihren Lernerfolg zu maximieren.
Seminarinhalt
Modul 1 - Einführung in Cloud Composer
Themen
- Der Bedarf des Dateningenieurs an Workflow-Orchestrierung
- Einführung in Apache Airflow
- Cloud-Komponist
- Umgebung einrichten
- Verwendung von Composer und Airflow
Zielsetzungen
- Erkunden Sie Apache Airflow und Cloud Composer.
- Bereitstellung von Cloud Composer-Instanzen.
- Erkunden Sie die Benutzeroberflächen von Airflow und Composer.
Aktivitäten
- Übung: Bereitstellung von Cloud Composer
Modul 2 - Erstellen und Verwalten von DAGs
Themen
- DAG-Struktur und bewährte Verfahren
- Gemeinsame Betreiber
- Abhängigkeiten, Auslöseregeln und Flusskontrolle
- Integration von Airflow und Google Cloud Services
Zielsetzungen
- DAGs schreiben.
- Erkunden Sie gängige Airflow-Operatoren.
- Verwalten Sie Auslöser, Abhängigkeiten und Ablaufsteuerung.
- Integrieren Sie Airflow mit Google Cloud Services.
Aktivitäten
- Übung: Zusammenstellen eines Datenverarbeitungs-Workflows
Modul 3 - Fortgeschrittene Luftstromtechniken und bewährte Verfahren
Themen
- Erweiterte Airflow-Funktionen
- Fehlersuche in DAGs
- Leistung und Skalierbarkeit
- Sicherheit und Zugangskontrolle
- Beobachtbarkeit und Überwachung
Zielsetzungen
- Nutzen Sie die erweiterten Airflow-Funktionen.
- Debug DAGs.
- Beobachten und überwachen Sie Ihre laufenden DAGs
Aktivitäten
- Übung: Erweitern und Überwachen von DAGs
Hinweise
Partner
Dieses Seminar bieten wir in Kooperation mit unserem Google LLC Learning Partner Fast Lane Institute for Knowledge Transfer GmbH an.
Open Badge für dieses Seminar - Ihr digitaler Kompetenznachweis
Durch die erfolgreiche Teilnahme an einem Kurs bei IT-Schulungen.com erhalten Sie zusätzlich zu Ihrem Teilnehmerzertifikat ein digitales Open Badge (Zertifikat) – Ihren modernen Nachweis für erworbene Kompetenzen.
Ihr Open Badge ist jederzeit in Ihrem persönlichen und kostenfreien Mein IT-Schulungen.com-Konto verfügbar. Mit wenigen Klicks können Sie diesen digitalen Nachweis in sozialen Netzwerken teilen, um Ihre Expertise sichtbar zu machen und Ihr berufliches Profil gezielt zu stärken.
Übersicht: Google Cloud Schulungen Portfolio
