Fivetran宣布将其开源数据转换框架SQLMesh捐赠给Linux基金会。SQLMesh允许数据团队定义、测试和部署SQL数据转换，具备虚拟数据环境和编译时优化器等功能。这一举措被视为对dbt Labs许可政策的回应，Fivetran希望支持一个完全开源的替代方案。

数据统一后，团队需进行建模和报告准备。Fivetran提供强大工具，支持数据转化与激活，帮助医疗专业人员快速获取敏感数据，优化患者流程与转诊指标。通过自然语言与数据互动，医院能高效提取信息，提升医疗服务质量。

现代数据堆栈领域的动态包括Fivetran收购Census以增强数据集成能力；Snowflake发布新一代标准仓库和程序化访问令牌；Tableau即将推出2025.2版本；OpenMetadata获得Bloomberg资助；Prefect推出无服务器执行环境及新定价方案。

Fivetran扩展其托管数据湖服务，支持谷歌云存储，自动转换数据为开放表格式，以提升与BigQuery的互操作性。同时，Fivetran与OpenAI合作，推动生成AI项目，帮助企业集中管理结构化和非结构化数据。

作为汇款公司的平台工程师，我们面临Databricks资源消耗过高的问题。为降低成本，我们考虑了两种数据同步策略：直接同步和通过S3创建外部表。直接同步简单但成本高，而通过S3则能降低计算费用并提供灵活的数据访问。最终选择取决于组织的优先事项，如成本、性能和数据新鲜度。

Fivetran在Databricks的Partner Connect中全面推出，使数据导入更简单。用户可以使用Fivetran的连接器将数据带入Databricks Lakehouse。Partner Connect是一个一站式门户，提供经过验证的数据、分析和人工智能工具，与Databricks Lakehouse集成。管理员权限不再是建立连接的限制，所有用户都可以通过Partner Connect建立与Fivetran的连接。用户只需点击Fivetran磁贴，选择目录并生成个人访问令牌。

现代数据堆栈（MDS）是云端现代数据平台的一部分，它将分析和支持工具交到了从业者手中。Lakehouse模式是最新且可能是最强大的模式，它将数据仓库的简单性和可扩展性与数据湖的开放性和成本优势结合在一起。本文提供了在Lakehouse上构建现代数据堆栈的五个原因，以及dbt Cloud和Fivetran on Databricks作为理想的MDS解决方案的原因。