数据工程概论

在本模块中，您将了解数据工程生态系统、不同类型的数据结构、文件格式、数据源以及数据专家在日常工作中使用的语言。您将了解几种不同类型的数据存储库，如关系型和非关系型数据库、数据仓库、数据集市和数据湖。您还将了解 ETL 和 ELT 流程、数据管道和数据集成平台。您还将了解什么是大数据，以及用于处理和存储大数据的工具。本模块结束时，将指导您创建 IBM 云帐户，并配置 IBM Db2 实例。

在本模块中，我们将引导您了解数据工程生命周期。您将了解数据平台的架构、选择和设计数据存储的因素，以及适用于数据平台和数据生命周期管理的安全性的不同方面。您还将了解用于收集、导入、整理和查询数据的流程、步骤和工具。您还将了解性能监控以及排除性能问题的步骤。我们还将讨论治理法规、为什么需要这些法规以及技术如何使法规得到遵守。在本模块的学习过程中，将指导您将 CSV 文件中的数据加载到上一模块中创建的 IBM Db2 实例中。还将指导您使用提供给您的一些基本 SQL 查询来探索数据集。

在本模块中，您将了解数据工程领域的职业学习机会，以及掌握数据工程师技能的不同学习路径。在本模块结束时，您将看到分为两部分的最终评分作业。第一部分包括一组问答题，第二部分包括开放式问题，这些问题将通过人工智能自动评分作业进行审核和评分。