Dies ist ein technischer, praxisorientierter Kurs, in dem Sie lernen, wie Sie DevOps-Best-Practices zum Aufbau von Datenpipelines implementieren und wie Sie Observability zur Wartung und Überwachung des Zustands von Datenpipelines implementieren. Der Kurs konzentriert sich auf die praktischsten Snowflake-Konzepte, -Funktionen und -Tools, damit Sie schnell mit diesen Konzepten arbeiten können. Zu Beginn lernen Sie etwas über DevOps, DevOps-Praktiken und wie DevOps in den Kontext des Data Engineering passt. Sie werden die Versionskontrolle, die deklarative Verwaltung von Datenbankobjekten, die kontinuierliche Bereitstellung und die Verwendung einer Befehlszeile zur Implementierung von DevOps-Best-Practices in eine Datenpipeline einbeziehen. Sie lernen insbesondere, wie Sie: - die Git-Integration von Snowflake nutzen, um Ihrer Datenpipeline eine Versionskontrolle hinzuzufügen - GitHub für die teamweite Zusammenarbeit an Ihrer Datenpipeline nutzen - CREATE OR ALTER nutzen, um Datenbankobjekte deklarativ zu verwalten - GitHub Actions nutzen, um eine kontinuierliche Bereitstellung für Ihre Pipeline zu implementieren - Snowflake CLI nutzen, um Änderungen in dedizierten Datenumgebungen bereitzustellen Sie lernen außerdem, wie Sie Observability implementieren, um den Zustand und die Leistung Ihrer Datenpipeline zu erhalten und zu überwachen. Sie lernen insbesondere, wie Sie: - Protokolle verwenden, um einen A-Eintrag über Ereignisse in Ihrer Pipeline zu führen - Traces verwenden, um einen detaillierten Verlauf von Ereignissen für Operationen in Ihrer Pipeline zu erhalten - Alarme verwenden, um bestimmte Bedingungen in Ihrer Pipeline zu überwachen, und diese mit Benachrichtigungen kombinieren, um Teammitglieder zum Handeln zu ermutigen, wenn kritische Fehler in der Pipeline auftreten Während des gesamten Kurses werden Sie zusammen mit dem Dozenten eine Kombination aus Snowflake, Visual Studio Code, GitHub und der Befehlszeile verwenden. Der Kurs wird durch Lesestoff ergänzt, der Ressourcen enthält, um Ihr Verständnis für bestimmte Konzepte zu vertiefen. Sie werden am Ende des Kurses wissen, wie Sie DevOps-Best-Practices in Datenpipelines einbinden können und wie Sie Observability nutzen können, um den Zustand und die Leistung von Pipelines zu überwachen.