内容提要
DataTalkClub推出了名为“数据工程Zoomcamp”的免费训练营,旨在解决数据工程资源和课程的匮乏问题。这个为期6周的训练营涵盖了GCP、Docker、Postgres、BigQuery、Spark和Kafka等主题,提供了数据工程的基本技能和实践经验。课程大纲包括容器化、工作流编排、数据仓库、分析工程、批处理和流数据等模块。训练营还提供研讨会和项目,帮助学习者成为专业的数据工程师。2024年的招生现已开放。
延伸解读
课程结构:六周模块与实战项目
训练营为期6周,每周聚焦一个主题:从GCP、Docker、Postgres和Terraform环境搭建,到Mage工作流编排、BigQuery数据仓库与机器学习、dbt分析工程、Spark批处理,最后是Kafka流处理。此外还包含两个研讨会(数据摄取与RisingWave流处理SQL)和一个端到端项目,要求学员构建数据管道并制作仪表板。这种循序渐进的结构旨在覆盖数据工程师的核心技能栈。
适合人群与先修要求
该课程面向初学者或希望转行的专业人士。先修要求包括基本的编码和命令行技能,以及SQL基础;Python有益但非必须。课程提供自学支持、带作业和截止日期的队列文件夹,以及互动Slack社区,适合能够自主安排学习进度并参与社区交流的学习者。
技术栈覆盖:从容器化到流处理
课程涵盖广泛的技术栈:容器化与基础设施即代码(Docker、Postgres、Terraform)、工作流编排(Mage)、数据仓库(BigQuery)、分析工程(dbt、Google Data Studio、Metabase)、批处理(Spark)和流处理(Kafka、RisingWave)。学员将接触GCP、Docker、Postgres、BigQuery、Spark和Kafka等工具,并通过作业和项目实践巩固所学。
2024年队列时间与参与方式
2024年队列的注册现已开放,开始日期为2024年1月15日欧洲中部时间17:00。课程采用自学加引导支持的模式,提供包含作业和截止日期的队列文件夹,以及用于同伴学习的互动Slack社区。学员需具备基本编码和命令行技能以及SQL基础,Python有益但非必须。
Q&A
数据工程Zoomcamp是什么?
数据工程Zoomcamp是DataTalkClub推出的一个免费训练营,旨在解决数据工程资源和课程的匮乏问题。它为期6周,涵盖GCP、Docker、Postgres、BigQuery、Spark和Kafka等主题,提供数据工程的基本技能和实践经验。
数据工程Zoomcamp的课程大纲包括哪些模块?
课程大纲包括6个模块、2个研讨会和一个项目。模块内容涵盖容器化、工作流编排、数据仓库、分析工程、批处理和流数据处理。具体模块为:1. 容器化与基础设施即代码;2. 工作流编排;3. 数据仓库;4. 分析工程;5. 批处理;6. 流数据处理。
参加数据工程Zoomcamp需要什么前提条件?
需要基本的编码和命令行技能,以及SQL基础。Python有益但非必须。
2024年数据工程Zoomcamp的招生详情是什么?
2024年招生现已开放,注册开始时间为2024年1月15日17:00 CET。课程提供自学支持、带作业和截止日期的队列文件夹,以及用于同伴学习的互动Slack社区。
数据工程Zoomcamp的讲师有哪些?
讲师包括Ankush Khanna、Victoria Perez Mola、Alexey Grigorev、Matt Palmer、Luis Oliveira和Michael Shoemaker。
数据工程Zoomcamp的项目要求是什么?
项目要求实现一个端到端的数据管道,包括:选择一个数据集,构建管道处理数据并存储到数据湖,构建管道将处理后的数据从数据湖转移到数据仓库,在数据仓库中转换数据并为仪表板做准备,最后构建一个包含两个图块的仪表板来可视化数据。