SQL 应该是数据工程管道的默认选择
SQL 应该是新数据工程工作的首选。它坚固、快速、面向未来且可测试。稍加注意,它就会清晰易读。一个新的 SQL 引擎 - DuckDB - 使 SQL 与其他高性能数据框架库竞争,使 SQL 成为各种规模数据的良好候选者。 SQL的优点 更多人将能够理解您的代码 阅读代码的次数多于编写代码的次数 。通过使用 SQL,更多人可以阅读您的代码,包括 BI 开发人员、业务分析师、数据工程师和数据科学家。 数据工程管道有多年坚持的习惯,而 SQL 经受住了时间的考验。它是最有可能在 10 年甚至 20 年后仍能被理解的语言。 SQL 也是 声明性 的——这意味着作者描述了他们想要什么..