深入数据工程:我在DataTalksClub的ZoomCamp 2025的第一周

深入数据工程:我在DataTalksClub的ZoomCamp 2025的第一周

💡 原文英文,约500词,阅读约需2分钟。
📝

内容提要

今年,我的目标是提升数据工程领域的专业技能。我参加了DataTalk的免费九周ZoomCamp,学习了Docker、Docker Compose和Terraform,实践了PostgreSQL数据库和云资源自动化设置。接下来将深入研究数据管道和工作流编排。

🎯

关键要点

  • 今年的目标是提升数据工程领域的专业技能。

  • 参加了DataTalk的免费九周ZoomCamp,学习了Docker、Docker Compose和Terraform。

  • 学习了Docker的基本概念,包括镜像、容器、Dockerfile和数据卷。

  • 实践了使用Docker容器化PostgreSQL数据库,快速搭建数据库环境。

  • 探索了Docker Compose,用于管理多容器应用程序。

  • 学习了Terraform作为基础设施即代码(IaC)工具,自动化云资源设置。

  • 使用Terraform在Google Cloud Platform上设置存储桶和虚拟机。

  • 通过纽约TLC数据集,将所学知识应用于数据的摄取、存储和分析。

  • 接下来将深入研究数据管道和工作流编排。

➡️

继续阅读