In diesem Kurs für Fortgeschrittene lernen Sie, robuste Batch-Datenpipelines in der Google Cloud zu entwerfen, aufzubauen und zu optimieren. Über die grundlegende Datenverarbeitung hinaus erforschen Sie umfangreiche Datenumwandlungen und effiziente Workflow-Orchestrierung, die für zeitnahe Business Intelligence und kritische Berichte unerlässlich sind. Sie erhalten praktische Übungen zur Implementierung von Dataflow für Apache Beam und Serverless für Apache Spark (Dataproc Serverless) und befassen sich mit wichtigen Überlegungen zur Datenqualität, Überwachung und Alarmierung, um die Reliabilität der Pipeline und die operative Exzellenz sicherzustellen. Grundlegende Kenntnisse von Data Warehousing, ETL/ELT, SQL, Python und Google Cloud-Konzepten werden empfohlen.
Erstellen von Batch-Datenpipelines in der Google Cloud
Dieser Kurs ist Teil mehrerer Programme.
Dozent: Google Cloud Training
49.494 bereits angemeldet
Bei enthalten
(1,710 Bewertungen)
Was Sie lernen werden
Bestimmen Sie, ob Batch-Datenpipelines die richtige Wahl für Ihren Business Case sind.
Entwurf und Erstellung skalierbarer Batch-Datenpipelines für die Aufnahme und Transformation großer Datenmengen.
Implementierung von Qualitätskontrollen für Daten in Batch-Pipelines zur Gewährleistung der Datenintegrität.
Orchestrierung, Verwaltung und Überwachung von Batch-Datenpipeline-Workflows, Implementierung von Fehlerbehandlung und Beobachtbarkeit mit Hilfe von Protokollierungs- und Überwachungstools.
Kompetenzen, die Sie erwerben
- Kategorie: Apache Airflow
- Kategorie: Cloud-Speicher
- Kategorie: Data-Warehousing
- Kategorie: Serverloses Rechnen
- Kategorie: Datenqualität
Wichtige Details
Zu Ihrem LinkedIn-Profil hinzufügen
5 Aufgaben
Erfahren Sie, wie Mitarbeiter führender Unternehmen gefragte Kompetenzen erwerben.
Erweitern Sie Ihre Fachkenntnisse
- Lernen Sie neue Konzepte von Branchenexperten
- Gewinnen Sie ein Grundverständnis bestimmter Themen oder Tools
- Erwerben Sie berufsrelevante Kompetenzen durch praktische Projekte
- Erwerben Sie ein Berufszertifikat zur Vorlage
In diesem Kurs gibt es 4 Module
Sie lernen die entscheidende Rolle eines Data Engineers bei der Entwicklung und Wartung von Batch-Datenpipelines kennen, verstehen deren Kernkomponenten und Lebenszyklus und analysieren die allgemeinen Herausforderungen bei der Batch-Datenverarbeitung. Sie werden auch die wichtigsten Google Cloud-Dienste kennenlernen, die diese Herausforderungen bewältigen.
Das ist alles enthalten
1 Aufgabe2 Plug-ins
Sie entwerfen skalierbare Batch-Datenpipelines für die Aufnahme und Transformation großer Datenmengen. Außerdem optimieren Sie Batch-Aufträge für hohen Durchsatz und Kosteneffizienz, indem Sie verschiedene Techniken zur Ressourcenverwaltung und Leistungsoptimierung anwenden.
Das ist alles enthalten
1 Aufgabe2 App-Elemente7 Plug-ins
Sie entwickeln Regeln für die Datenvalidierung und Bereinigungslogik, um die Datenqualität in Batch-Pipelines zu gewährleisten. Außerdem implementieren Sie Strategien für die Verwaltung der Schemaentwicklung und die Datendeduplizierung in großen Datenbeständen.
Das ist alles enthalten
1 Aufgabe1 App-Element6 Plug-ins
Sie orchestrieren komplexe Batch-Datenpipeline-Workflows für eine effiziente Planung und Verlaufsverfolgung. Außerdem implementieren Sie eine robuste Fehlerbehandlung, Überwachung und Beobachtbarkeit für Batch-Daten-Pipelines.
Das ist alles enthalten
2 Aufgaben1 App-Element6 Plug-ins
Erwerben Sie ein Karrierezertifikat.
Fügen Sie dieses Zeugnis Ihrem LinkedIn-Profil, Lebenslauf oder CV hinzu. Teilen Sie sie in Social Media und in Ihrer Leistungsbeurteilung.
Dozent
von
Mehr von Cloud Computing entdecken
Google Cloud
Status: Kostenloser Testzeitraum
Google Cloud
Status: Kostenloser TestzeitraumGoogle Cloud
Warum entscheiden sich Menschen für Coursera für ihre Karriere?
Bewertungen von Lernenden
1.710 Bewertungen
- 5 stars
65,96 %
- 4 stars
25,73 %
- 3 stars
6,02 %
- 2 stars
1,46 %
- 1 star
0,81 %
Zeigt 3 von 1710 an
Geprüft am 27. Mai 2020
A great course to help understand the various wonderful options Google Cloud has to offer to move on-premise Hadoop workload to Google Cloud Platform to leverage scalability of clusters.
Geprüft am 19. Mai 2020
Great course teaching how to build batch pipelines through GCP technologies, and showing cool tools for data wrangling and analysis
Geprüft am 18. Juni 2020
Excellent course with appropriate explanation on cloud data fusion, data composer, data proc and cloud data-flow. Must learn course for all aspiring Big Data Engineers.
Neue Karrieremöglichkeiten mit Coursera Plus
Unbegrenzter Zugang zu 10,000+ Weltklasse-Kursen, praktischen Projekten und berufsqualifizierenden Zertifikatsprogrammen - alles in Ihrem Abonnement enthalten
Bringen Sie Ihre Karriere mit einem Online-Abschluss voran.
Erwerben Sie einen Abschluss von erstklassigen Universitäten – 100 % online
Schließen Sie sich mehr als 3.400 Unternehmen in aller Welt an, die sich für Coursera for Business entschieden haben.
Schulen Sie Ihre Mitarbeiter*innen, um sich in der digitalen Wirtschaft zu behaupten.
Häufig gestellte Fragen
Ja, Sie können das erste Video in der Vorschau ansehen und den Lehrplan einsehen, bevor Sie sich anmelden. Sie müssen den Kurs kaufen, um auf Inhalte zuzugreifen, die nicht in der Vorschau enthalten sind.
Wenn Sie sich vor dem Beginn der Sitzung in den Kurs einschreiben, haben Sie Zugang zu allen Vorlesungsvideos und Lesestoff für den Kurs. Sobald die Sitzung beginnt, können Sie die Aufgaben einreichen.
Sobald Sie sich angemeldet haben und Ihre Sitzung beginnt, haben Sie Zugang zu allen Videos und anderen Ressourcen, einschließlich der Lektüre und dem Diskussionsforum des Kurses. Sie können Übungsaufgaben ansehen und einreichen und die erforderlichen benoteten Aufgaben erledigen, um eine Note und ein Kurszertifikat zu erhalten.
Weitere Fragen
Finanzielle Unterstützung verfügbar,