DevOps and CI/CD for Data Engineering Performance

Développez vos compétences avec Coursera Plus pour 239 $/an (habituellement 399 $). Économisez maintenant.

Ce cours n'est pas disponible en Français (France)

Nous sommes actuellement en train de le traduire dans plus de langues.

DevOps and CI/CD for Data Engineering Performance

Ce cours fait partie de Certificat Professionnel Open source Data Engineering with Spark, dbt & Airflow

Instructeur : Professionals from the Industry

Inclus avec

13 modules

Obtenez un aperçu d'un sujet et apprenez les principes fondamentaux.

niveau Débutant

Expérience recommandée

1 semaine à compléter

à 10 heures par semaine

Planning flexible

Apprenez à votre propre rythme

13 modules

Obtenez un aperçu d'un sujet et apprenez les principes fondamentaux.

niveau Débutant

Expérience recommandée

1 semaine à compléter

à 10 heures par semaine

Planning flexible

Apprenez à votre propre rythme

Ce que vous apprendrez

Resolve merge conflicts and trace bugs using Git history tools, keeping collaborative codebases stable and production-ready.
Design branching strategies and automate deployments with CI/CD pipelines to safely promote data pipeline artifacts across environments.
Build and publish versioned Docker images and automate server configuration with Ansible for consistent, reproducible environments.
Analyze query execution metrics and optimize resource allocation to maintain performance targets in production data systems.

Compétences que vous acquerrez

Catégorie : DevOps
Catégorie : Data Pipelines
Catégorie : CI/CD
Catégorie : Containerization
Catégorie : Performance Tuning
Catégorie : Configuration Management
Catégorie : Continuous Integration
Catégorie : Root Cause Analysis
Catégorie : Infrastructure as Code (IaC)
Catégorie : Development Environment
Catégorie : Data Infrastructure
Catégorie : Version Control
Catégorie : Application Deployment
Catégorie : Continuous Deployment

Outils que vous découvrirez

Catégorie : Git (Version Control System)
Catégorie : Docker (Software)
Catégorie : Ansible

Détails à connaître

Certificat partageable

Ajouter à votre profil LinkedIn

Récemment mis à jour !

mars 2026

Évaluations

21 affectations¹

Noté par l'IA voir l'avis de non-responsabilité

Enseigné en Anglais

Découvrez comment les employés des entreprises prestigieuses maîtrisent des compétences recherchées

En savoir plus sur Coursera pour les affaires

logos de Petrobras, TATA, Danone, Capgemini, P&G et L'Oreal

Élaborez votre expertise en Data Management

Ce cours fait partie de la Certificat Professionnel Open source Data Engineering with Spark, dbt & Airflow

Lorsque vous vous inscrivez à ce cours, vous êtes également inscrit(e) à ce Certificat Professionnel.

Apprenez de nouveaux concepts auprès d'experts du secteur
Acquérez une compréhension de base d'un sujet ou d'un outil
Développez des compétences professionnelles avec des projets pratiques
Obtenez un certificat professionnel partageable auprès de Coursera

Il y a 13 modules dans ce cours

You'll build the skills to manage, automate, and optimize production-grade data systems using industry-standard DevOps practices. By completing this course, you'll be able to resolve complex version control conflicts, design branching strategies for collaborative development, containerize data environments with Docker, automate infrastructure configuration with Ansible, deploy data pipelines through CI/CD workflows, and optimize query performance to maintain service levels.

This course is unique because it bridges the gap between software engineering and data engineering — giving you hands-on experience with the exact tools and workflows used in real production environments. Rather than covering concepts in isolation, you'll integrate version control, containerization, automation, and performance tuning into a cohesive DevOps skillset that employers actively seek. Whether you're moving into a data engineering role or strengthening your current practice, you'll finish with portfolio-ready work that demonstrates job-ready capability.

You will learn systematic approaches to resolve merge conflicts that automated Git processes cannot handle, distinguishing between text-based line conflicts and binary file selection strategies in data engineering environments.

Inclus

2 vidéos1 lecture1 devoir

You will learn systematic debugging techniques using Git's historical analysis capabilities to identify the exact commit that introduced software defects through binary search and commit analysis methodologies.

Inclus

3 vidéos1 lecture2 devoirs

3 vidéosTotal 17 minutes

Why Git Forensics Transforms Debugging from Guesswork to Science4 minutes
Git Bisect: Binary Search Algorithm for Bug Detection9 minutes
Automated Git Bisect with Custom Test Scripts4 minutes

1 lectureTotal 10 minutes

Advanced Git History Analysis Techniques10 minutes

2 devoirsTotal 18 minutes

SQL Schema Merge Conflict Resolution 15 minutes
Bug Tracing and Git History Analysis Knowledge Check3 minutes

You will understand fundamental branching models and design strategic workflows that enable parallel development while maintaining code stability.

Inclus

2 vidéos1 lecture2 devoirs

2 vidéosTotal 11 minutes

Why Version Control Strategy Matters in Data Engineering Teams4 minutes
Branch Naming Conventions and Merge Protocol Design8 minutes

1 lectureTotal 12 minutes

Understanding Branching Models and Team Collaboration Patterns12 minutes

2 devoirsTotal 20 minutes

Design Your Team's Branching Workflow Documentation13 minutes
Branching Strategy Fundamentals Knowledge Check7 minutes

You will implement their branching strategy using GitHub's protection features and automation tools, creating a production-ready development.

Inclus

3 vidéos1 lecture2 devoirs

3 vidéosTotal 14 minutes

Scaling Development Teams Through Strategic Implementation4 minutes
Configuring GitHub Branch Protection and Required Reviews5 minutes
Setting Up Automated GitHub Actions for Branch Workflows5 minutes

1 lectureTotal 10 minutes

GitHub Branch Protection Rules and Workflow Automation10 minutes

2 devoirsTotal 21 minutes

Complete Branching Strategy Implementation Project15 minutes
GitHub Implementation and Workflow Automation Knowledge Check6 minutes

You will learn containerization fundamentals and create production-ready multi-stage Dockerfiles for data processing environments.

Inclus

3 vidéos1 lecture1 devoir1 laboratoire non noté

3 vidéosTotal 15 minutes

Why Containerization Transforms Data Engineering Workflows3 minutes
Container Fundamentals for Data Processing Environments9 minutes
Building Multi-stage Dockerfiles for Spark Data Processing3 minutes

1 lectureTotal 10 minutes

Multi-stage Dockerfile Architecture for Data Processing10 minutes

1 devoirTotal 3 minutes

Container Fundamentals Knowledge Check3 minutes

1 laboratoire non notéTotal 60 minutes

Build Production-Ready Multi-stage Dockerfile for Data Processing60 minutes

You will implement systematic version tagging strategies and integrate with enterprise container registries for automated deployment workflows.

Inclus

2 vidéos2 lectures2 devoirs

2 vidéosTotal 13 minutes

Systematic Container Image Tagging for Data Infrastructure8 minutes
Setting Up Amazon ECR Repository and Authentication5 minutes

2 lecturesTotal 20 minutes

Enterprise Container Registry Integration Value Proposition10 minutes
Amazon ECR Integration Patterns for Data Engineering Teams10 minutes

2 devoirsTotal 15 minutes

Complete Containerization Workflow Mastery Assessment12 minutes
Container Registry Integration and Deployment Workflow Concepts3 minutes

You will understand why automation tools are essential for scalable infrastructure management and explore foundational configuration management concepts through real-world enterprise scenarios.

Inclus

2 vidéos1 lecture2 devoirs

2 vidéosTotal 9 minutes

The Infrastructure Challenge: From Manual Chaos to Automated Excellence2 minutes
Ansible Architecture and Automation Workflow6 minutes

1 lectureTotal 8 minutes

Configuration Management Fundamentals for Data Infrastructure8 minutes

2 devoirsTotal 21 minutes

Design Your First Configuration Management Strategy18 minutes
Ansible Fundamentals Knowledge Check 3 minutes

You will create functional Ansible playbooks that automate Python installation, pip package management, systemd service configuration, and webserver verification to achieve consistent server deployments across multiple environments.

Inclus

2 vidéos2 lectures2 devoirs1 laboratoire non noté

2 vidéosTotal 15 minutes

Advanced Playbook Features: Variables, Templates, and Error Handling6 minutes
Building a Complete Python Web Server Deployment9 minutes

2 lecturesTotal 20 minutes

Enterprise Automation Success Stories: From Manual Chaos to Scalable Infrastructure8 minutes
Understanding Ansible Playbooks: Components and Structure12 minutes

2 devoirsTotal 23 minutes

Ansible Automation Mastery Assessment15 minutes
Ansible Automation Implementation Knowledge Check8 minutes

1 laboratoire non notéTotal 18 minutes

Create Ansible Playbooks for Automated Software Installation18 minutes

You will learn the foundational concepts and practical applications of CI/CD pipelines for data deployment automation.

Inclus

3 vidéos1 lecture1 devoir

You will implement comprehensive automated deployment workflows that safely promote data pipeline components from staging to production with proper validation and monitoring.

Inclus

2 vidéos2 lectures2 devoirs1 laboratoire non noté

2 vidéosTotal 8 minutes

Advanced GitHub Actions for Production Deployments5 minutes
Building Complete GitHub Actions Deployment Pipeline3 minutes

2 lecturesTotal 18 minutes

Enterprise Data Deployment Challenges and Automation Solutions8 minutes
Monitoring and Validation Strategies for Automated Deployments10 minutes

2 devoirsTotal 15 minutes

Comprehensive CI/CD Pipeline Implementation Assessment10 minutes
Advanced Data Deployment Automation Knowledge Check5 minutes

1 laboratoire non notéTotal 20 minutes

Automated Data Pipeline Deployment with GitHub Actions20 minutes

You will learn the fundamentals of query performance analysis by learning to identify bottlenecks, interpret execution plans, and understand key performance metrics that guide optimization decisions.

Inclus

4 vidéos1 lecture1 devoir

4 vidéosTotal 20 minutes

Why Query Performance Analysis Prevents System Failures3 minutes
Query Performance Fundamentals for Data Engineers6 minutes
Interpreting Query Execution Plans for Optimization6 minutes
Using pg_stat_activity to Identify Performance Issues6 minutes

1 lectureTotal 7 minutes

PostgreSQL Performance Monitoring Tools and Techniques7 minutes

1 devoirTotal 3 minutes

PostgreSQL Performance Analysis Knowledge Check3 minutes

You will apply performance analysis insights to make strategic resource allocation decisions and implement targeted optimizations that maintain service level agreements in production environments.

Inclus

2 vidéos1 lecture2 devoirs

2 vidéosTotal 14 minutes

Strategic Resource Allocation for Service Level Agreements6 minutes
Implementing Memory and Index Optimization in PostgreSQL8 minutes

1 lectureTotal 7 minutes

Strategic Database Resource Allocation for Performance Optimization7 minutes

2 devoirsTotal 18 minutes

Query Performance Analysis and Resource Allocation Mastery15 minutes
PostgreSQL Resource Allocation Knowledge Check3 minutes

You will create a complete DevOps workflow that integrates version control, containerization, automation, and performance optimization to deploy and maintain data engineering systems. This project combines Git conflict resolution, Docker containerization, Ansible automation, CI/CD pipeline design, and query performance optimization into a realistic enterprise deployment scenario.

Inclus

4 lectures1 devoir

Obtenez un certificat professionnel

Ajoutez ce titre à votre profil LinkedIn, à votre curriculum vitae ou à votre CV. Partagez-le sur les médias sociaux et dans votre évaluation des performances.

Instructeur

Professionals from the Industry

376 Cours54 291 apprenants

Offert par

Coursera

En savoir plus sur Data Management

Statut : Essai gratuit
Coursera
Git, Docker & CI/CD: DevOps Foundations for Data Engineers
Spécialisation
Statut : Essai gratuit
Coursera
Automate Data Deployments with CI/CD Pipelines
Cours
Statut : Essai gratuit
Coursera
DataOps: Automation & Reliability
Spécialisation
Statut : Essai gratuit
KodeKloud
Data Engineering Essentials
Cours

Pour quelles raisons les étudiants sur Coursera nous choisissent-ils pour leur carrière ?

Felipe M.

Étudiant(e) depuis 2018

’Pouvoir suivre des cours à mon rythme à été une expérience extraordinaire. Je peux apprendre chaque fois que mon emploi du temps me le permet et en fonction de mon humeur.’

Jennifer J.

Étudiant(e) depuis 2020

’J'ai directement appliqué les concepts et les compétences que j'ai appris de mes cours à un nouveau projet passionnant au travail.’

Larry W.

Étudiant(e) depuis 2021

’Lorsque j'ai besoin de cours sur des sujets que mon université ne propose pas, Coursera est l'un des meilleurs endroits où se rendre.’

Chaitanya A.

’Apprendre, ce n'est pas seulement s'améliorer dans son travail : c'est bien plus que cela. Coursera me permet d'apprendre sans limites.’

Ouvrez de nouvelles portes avec Coursera Plus

Accès illimité à 10,000+ cours de niveau international, projets pratiques et programmes de certification prêts à l'emploi - tous inclus dans votre abonnement.

Faites progresser votre carrière avec un diplôme en ligne

Obtenez un diplôme auprès d’universités de renommée mondiale - 100 % en ligne

Découvrir les diplômes

Rejoignez plus de 3 400 entreprises mondiales qui ont choisi Coursera pour les affaires

Améliorez les compétences de vos employés pour exceller dans l’économie numérique

Foire Aux Questions

To access the course materials, assignments and to earn a Certificate, you will need to purchase the Certificate experience when you enroll in a course. You can try a Free Trial instead, or apply for Financial Aid. The course may offer 'Full Course, No Certificate' instead. This option lets you see all course materials, submit required assessments, and get a final grade. This also means that you will not be able to purchase a Certificate experience.

When you enroll in the course, you get access to all of the courses in the Certificate, and you earn a certificate when you complete the work. Your electronic Certificate will be added to your Accomplishments page - from there, you can print your Certificate or add it to your LinkedIn profile.

Plus de questions

Visitez le Centre d'Aide pour les Étudiants

Aide financière disponible,

¹ Certains travaux de ce cours sont notés par l'IA. Pour ces travaux, vos Données internes seront utilisées conformément à Notification de confidentialité de Coursera.