课程主页: https://www.coursera.org/learn/data-enginering-capstone-project

引言

在数据科学领域，数据工程的角色变得越来越重要。作为一名数据工程师，掌握如何设计、实施和维护数据平台至关重要。在经过IBM数据工程专业证书的学习后，我有幸参加了Coursera上的《数据工程顶石项目》课程，今天想和大家分享我的学习体验和推荐理由。

课程概述

这门课程让我们以初级数据工程师的身份，参与到一个真实的业务案例中，展示自己在数据工程方面的技能。课程内容涵盖了构建数据分析平台所需的各种技能与技术，让我在实践中巩固了理论知识。

课程大纲

• 数据平台架构与OLTP数据库 – 设计一个使用MySQL作为OLTP数据库的数据平台，存储OLTP数据。
• 查询NoSQL数据库中的数据 – 设计一个使用MongoDB作为NoSQL数据库的数据平台，用来存储电商目录数据。
• 构建数据仓库 – 设计并实现一个数据仓库，并从数据仓库中生成报告。
• 数据分析 – 在电商公司担任数据工程师，设计一个反映业务关键指标的报告仪表板。
• ETL与数据管道 – 使用提供的Python脚本执行各种ETL操作，将数据从RDBMS迁移至NoSQL、从NoSQL迁移至RDBMS，并将数据转移至数据仓库。
• 使用Spark进行大数据分析 – 根据web服务器的数据分析搜索词，加载预训练的销售预测模型，并预测未来一年的销售情况。
• 最终提交与同伴评审 – 提交实验室的截图并进行同伴评审。

学习收获

通过这个课程，我不仅学习到了如何在MySQL和MongoDB中管理数据，还掌握了ETL流程和如何使用Spark进行大数据分析。此外，项目的实操性质让我能够真正把学到的知识应用到实际中，提高了我的解决问题能力。

推荐理由

如果你对数据工程感兴趣，想提升自己的综合技能，这门《数据工程顶石项目》课程绝对值得推荐。它不仅涵盖了数据工程的重要概念，而且提供了实用的案例，帮助学员更好地理解和应用所学知识。在完成课程后，我感到更有信心能够应对未来的工作挑战。

结束语

参与《数据工程顶石项目》课程的经历是我职业生涯中的一次重要里程碑，期待更多人能够通过这个课程提升自己的能力，迈出成功的第一步！

课程主页: https://www.coursera.org/learn/data-enginering-capstone-project