本周Python动态：Fivetran通过mypy编译显著加速SQLGlot，速度提升5倍。新工具Retrace实现了确定性记录回放调试。分享了MCP的简单示例，并讨论了DRY重构可能导致代码质量下降。介绍了Mirage和ShadowBroker项目，Mirage为AI代理提供统一虚拟文件系统，ShadowBroker则是去中心化的OSINT平台。

Fivetran首席产品官Anjan Kundavaram在《The New Stack》播客中强调了开放数据基础设施的重要性。他指出，虽然AI代理在数据查询中表现高效，但在封闭的数据生态系统中会增加成本。他建议企业投资开放基础设施，以提升分析效率，降低因数据分散带来的高成本和低效能。

Fivetran宣布将其开源数据转换框架SQLMesh捐赠给Linux基金会。SQLMesh允许数据团队定义、测试和部署SQL数据转换，具备虚拟数据环境和编译时优化器等功能。这一举措被视为对dbt Labs许可政策的回应，Fivetran希望支持一个完全开源的替代方案。

数据统一后，团队需进行建模和报告准备。Fivetran提供强大工具，支持数据转化与激活，帮助医疗专业人员快速获取敏感数据，优化患者流程与转诊指标。通过自然语言与数据互动，医院能高效提取信息，提升医疗服务质量。

现代数据堆栈领域的动态包括Fivetran收购Census以增强数据集成能力；Snowflake发布新一代标准仓库和程序化访问令牌；Tableau即将推出2025.2版本；OpenMetadata获得Bloomberg资助；Prefect推出无服务器执行环境及新定价方案。

Fivetran扩展其托管数据湖服务，支持谷歌云存储，自动转换数据为开放表格式，以提升与BigQuery的互操作性。同时，Fivetran与OpenAI合作，推动生成AI项目，帮助企业集中管理结构化和非结构化数据。

作为汇款公司的平台工程师，我们面临Databricks资源消耗过高的问题。为降低成本，我们考虑了两种数据同步策略：直接同步和通过S3创建外部表。直接同步简单但成本高，而通过S3则能降低计算费用并提供灵活的数据访问。最终选择取决于组织的优先事项，如成本、性能和数据新鲜度。

Fivetran与PlanetScale的集成现已推出，用户可以轻松提取PlanetScale数据库的数据并加载到其他分析平台。这一集成简化了数据管道管理，支持快速访问数据库洞察，便于与其他业务数据结合分析。用户可通过Fivetran连接器设置，享受400多个连接器的优势，提升数据处理效率。

Fivetran在Databricks的Partner Connect中全面推出，使数据导入更简单。用户可以使用Fivetran的连接器将数据带入Databricks Lakehouse。Partner Connect是一个一站式门户，提供经过验证的数据、分析和人工智能工具，与Databricks Lakehouse集成。管理员权限不再是建立连接的限制，所有用户都可以通过Partner Connect建立与Fivetran的连接。用户只需点击Fivetran磁贴，选择目录并生成个人访问令牌。

现代数据堆栈（MDS）是云端现代数据平台的一部分，它将分析和支持工具交到了从业者手中。Lakehouse模式是最新且可能是最强大的模式，它将数据仓库的简单性和可扩展性与数据湖的开放性和成本优势结合在一起。本文提供了在Lakehouse上构建现代数据堆栈的五个原因，以及dbt Cloud和Fivetran on Databricks作为理想的MDS解决方案的原因。