Coursera
Spezialisierung für Real-Time, Real Fast: Kafka & Spark for Data Engineers

Erwerben Sie mit Coursera Plus für 199 $ (regulär 399 $) das nächste Level. Jetzt sparen.

spezialisierung ist nicht verfügbar in Deutsch (Deutschland)

Wir übersetzen es in weitere Sprachen.
Coursera

Spezialisierung für Real-Time, Real Fast: Kafka & Spark for Data Engineers

Real-Time Kafka & Spark Data Engineering. Build fault-tolerant streaming pipelines processing millions of events with Kafka & Spark.

Caio Avelino
Jairo Sanchez

Dozenten:

Bei Coursera Plus enthalten

Befassen Sie sich eingehend mit einem Thema
Stufe Mittel

Empfohlene Erfahrung

4 Wochen zu vervollständigen
unter 10 Stunden pro Woche
Flexibler Zeitplan
In Ihrem eigenen Lerntempo lernen
Befassen Sie sich eingehend mit einem Thema
Stufe Mittel

Empfohlene Erfahrung

4 Wochen zu vervollständigen
unter 10 Stunden pro Woche
Flexibler Zeitplan
In Ihrem eigenen Lerntempo lernen

Was Sie lernen werden

  • Design and optimize Kafka clusters for high throughput, low latency, and fault tolerance in production environments

  • Build end-to-end streaming pipelines with Spark Structured Streaming, exactly-once semantics, and schema evolution

  • Implement real-time dashboards, orchestration, and disaster recovery for enterprise streaming architectures

Kompetenzen, die Sie erwerben

  • Kategorie: Event-Driven Programming
  • Kategorie: Prometheus (Software)
  • Kategorie: Scalability
  • Kategorie: Docker (Software)
  • Kategorie: Operational Databases
  • Kategorie: Data Transformation
  • Kategorie: Fraud detection
  • Kategorie: Data Processing
  • Kategorie: Apache Kafka
  • Kategorie: Data Pipelines
  • Kategorie: Data Integrity
  • Kategorie: Grafana
  • Kategorie: PySpark
  • Kategorie: Data Architecture
  • Kategorie: Performance Tuning
  • Kategorie: Data Governance
  • Kategorie: Real Time Data
  • Kategorie: Apache Spark
  • Kategorie: Disaster Recovery
  • Kategorie: System Monitoring

Wichtige Details

Zertifikat zur Vorlage

Zu Ihrem LinkedIn-Profil hinzufügen

Unterrichtet in Englisch
Kürzlich aktualisiert!

Januar 2026

Erfahren Sie, wie Mitarbeiter führender Unternehmen gefragte Kompetenzen erwerben.

 Logos von Petrobras, TATA, Danone, Capgemini, P&G und L'Oreal

Erweitern Sie Ihre Fachkenntnisse.

  • Erlernen Sie gefragte Kompetenzen von Universitäten und Branchenexperten.
  • Erlernen Sie ein Thema oder ein Tool mit echten Projekten.
  • Entwickeln Sie ein fundiertes Verständnisse der Kernkonzepte.
  • Erwerben Sie ein Karrierezertifikat von Coursera.

Spezialisierung - 4 Kursreihen

Was Sie lernen werden

  • Configure Kafka topics with appropriate replication factors, partition counts, and durability settings to ensure high availability.

  • Diagnose performance bottlenecks using consumer lag metrics, broker health indicators, and throughput analysis.

  • Optimize producer and consumer configurations including batching, compression, and parallelism to maximize throughput while meeting latency SLAs.

Kompetenzen, die Sie erwerben

Kategorie: Performance Tuning
Kategorie: Apache Kafka
Kategorie: System Configuration
Kategorie: Real Time Data
Kategorie: System Monitoring
Kategorie: Process Optimization
Kategorie: Scalability
Kategorie: Content Strategy
Kategorie: Prometheus (Software)
Kategorie: Grafana
Kategorie: Command-Line Interface
Kategorie: Distributed Computing
Kategorie: Data Loss Prevention

Was Sie lernen werden

  • Explain the execution model of Spark Structured Streaming and build a simple pipeline from a file source to a console sink.

  • Develop streaming pipelines that integrate with Kafka, apply event-time processing with watermarks, and write reliable outputs to Delta Lake.

  • Build an end-to-end Spark streaming pipeline that can be deployed in real-world production environments.

Kompetenzen, die Sie erwerben

Kategorie: Data Transformation
Kategorie: JSON
Kategorie: Apache Spark
Kategorie: PySpark
Kategorie: Event Management
Kategorie: Scalability
Kategorie: Data Pipelines
Kategorie: Apache Kafka
Kategorie: Data Integrity
Kategorie: Data Processing
Kategorie: Real Time Data
Kategorie: Event Monitoring
Kategorie: Data-Driven Decision-Making

Was Sie lernen werden

  • Explain Spark’s streaming model and produce a dashboard-ready table from a simple file source.

  • Construct a real-time pipeline that ingests from Kafka, processes with Spark, and stores result in Delta using event-time windows and watermarks.

  • Operate a production-oriented dashboard with refresh policies, monitoring, and failure recovery.

Kompetenzen, die Sie erwerben

Kategorie: Apache Kafka
Kategorie: Data Persistence
Kategorie: Dashboard
Kategorie: Business Metrics
Kategorie: Real Time Data
Kategorie: PySpark
Kategorie: Data Pipelines
Kategorie: JSON
Kategorie: Data Integrity
Kategorie: Scalability
Kategorie: Business Intelligence
Kategorie: Apache Spark
Kategorie: Continuous Monitoring

Was Sie lernen werden

  • Explain CDC fundamentals (binlog/WAL) and schema evolution strategies.

  • Configure a Schema Registry pipeline locally using Debezium and Kafka.

  • Use streaming SQL (Flink/ksqlDB) to map, cast, and merge divergent schemas into a canonical model.

Kompetenzen, die Sie erwerben

Kategorie: Schematic Diagrams
Kategorie: Data Capture
Kategorie: Data Transformation
Kategorie: Data Validation
Kategorie: Software Versioning
Kategorie: Continuous Monitoring
Kategorie: Apache Kafka
Kategorie: SQL
Kategorie: Continuous Integration
Kategorie: Data Mapping
Kategorie: PostgreSQL
Kategorie: Data Modeling
Kategorie: Real Time Data
Kategorie: Database Design
Kategorie: Data Storage Technologies
Kategorie: Query Languages
Kategorie: Data Pipelines
Kategorie: Data Integrity

Erwerben Sie ein Karrierezertifikat.

Fügen Sie dieses Zeugnis Ihrem LinkedIn-Profil, Lebenslauf oder CV hinzu. Teilen Sie sie in Social Media und in Ihrer Leistungsbeurteilung.

Dozenten

Coursera
0 Kurse0 Lernende

von

Coursera

Warum entscheiden sich Menschen für Coursera für ihre Karriere?

Felipe M.
Lernender seit 2018
„Es ist eine großartige Erfahrung, in meinem eigenen Tempo zu lernen. Ich kann lernen, wenn ich Zeit und Nerven dazu habe.“
Jennifer J.
Lernender seit 2020
„Bei einem spannenden neuen Projekt konnte ich die neuen Kenntnisse und Kompetenzen aus den Kursen direkt bei der Arbeit anwenden.“
Larry W.
Lernender seit 2021
„Wenn mir Kurse zu Themen fehlen, die meine Universität nicht anbietet, ist Coursera mit die beste Alternative.“
Chaitanya A.
„Man lernt nicht nur, um bei der Arbeit besser zu werden. Es geht noch um viel mehr. Bei Coursera kann ich ohne Grenzen lernen.“
Coursera Plus

Neue Karrieremöglichkeiten mit Coursera Plus

Unbegrenzter Zugang zu 10,000+ Weltklasse-Kursen, praktischen Projekten und berufsqualifizierenden Zertifikatsprogrammen - alles in Ihrem Abonnement enthalten

Bringen Sie Ihre Karriere mit einem Online-Abschluss voran.

Erwerben Sie einen Abschluss von erstklassigen Universitäten – 100 % online

Schließen Sie sich mehr als 3.400 Unternehmen in aller Welt an, die sich für Coursera for Business entschieden haben.

Schulen Sie Ihre Mitarbeiter*innen, um sich in der digitalen Wirtschaft zu behaupten.

Häufig gestellte Fragen