从原始数据到精炼数据：使用AWS Glue在S3中整理数据以供Athena查询
原文英文，约400词，阅读约需2分钟。
📝
内容提要
数据工程师使用AWS Glue创建了一个完整的ETL流水线，包括Fetch CSV、Convert to Parquet和Curate Data三个作业，可以处理结构化或非结构化数据。流水线易于实施和维护，使用Athena查看S3中的数据。
❓
Q&A
AWS Glue的ETL流水线包含哪些主要作业？
ETL流水线包含Fetch CSV、Convert to Parquet和Curate Data三个作业。
如何使用AWS Glue处理结构化和非结构化数据？
AWS Glue的ETL流水线可以处理结构化或非结构化数据，实施和维护简单。
Driver作业在AWS Glue中负责什么？
Driver作业负责检查其他作业是否正在运行，并传递配置给Controller作业。
Fetch CSV作业的主要功能是什么？
Fetch CSV作业从源获取CSV格式的数据并存储在S3中。
Convert to Parquet作业的作用是什么？
Convert to Parquet作业在Fetch CSV完成后触发，将CSV文件转换为Parquet格式。
Athena在AWS Glue ETL流水线中有什么用途？
Athena用于查看S3中的数据，实施和维护简单。
🏷️
