小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

用部署形态、写并发、查询形态与持久化需求收束 SQLite / PostgreSQL·InnoDB / DuckDB / RocksDB 选型;给出站内阅读地图、全系列学术谱系与开放问题,标志 SQLite 内核系列完成。

【SQLite 内核】选型与阅读地图:SQLite vs PG vs DuckDB vs RocksDB

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-07-18T00:00:00Z
将DuckDB作为MySQL 9.7存储引擎运行

Percona Operator for MySQL 1.2.0版本新增了跨站点复制、加密备份和自动存储扩展功能,提升了MySQL的安全性和灵活性。

将DuckDB作为MySQL 9.7存储引擎运行

Percona Database Performance Blog
Percona Database Performance Blog · 2026-07-10T13:38:16Z

本文探讨了DuckDB与Trino的区别。DuckDB作为嵌入式OLAP引擎,适合单机分析,支持向量化和morsel-driven并行处理,能够高效读取Parquet和Iceberg格式数据。实验表明,DuckDB在小规模数据处理时能有效进行投影裁剪和谓词下推,但在多租户和大数据场景下仍需使用Trino。

【分布式 OLAP 查询引擎】DuckDB 与 DataFusion:嵌入式分析对照

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-07-07T00:00:00Z

本文探讨了分布式OLAP查询引擎(如Trino、Spark、DuckDB)的优化与MPP执行,分析了SQL从解析到执行的各个阶段,包括逻辑与物理优化、执行模型和下推机制,旨在帮助数据平台工程师和架构负责人理解交互式SQL在数据湖上的应用与性能调优。

【分布式 OLAP 查询引擎】Trino · Spark · DuckDB · 优化与 MPP 执行

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-07-07T00:00:00Z

DuckDB 是一种嵌入式列向量化分析引擎,适用于单机分析和数据科学。其架构包括 Catalog、Optimizer、Execution 和 Storage,支持 SQL 查询,并能直接处理 Parquet 和 CSV 文件。DuckDB 更适合零运维的嵌入式分析场景,支持 ACID 事务,适合小规模数据分析。

【列存引擎内核】DuckDB 架构与嵌入式 OLAP

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-06-18T00:00:00Z

DuckDB 采用向量批处理和 morsel-driven 并行执行模型,显著提升数据处理效率。在 OLAP 任务中,DuckDB 的表现优于 PostgreSQL 和 ClickHouse,支持动态任务调度和负载均衡。其物理算子通过管道化处理数据,优化哈希连接和聚合操作,优化器通过下推谓词和动态规划提升查询性能。

【列存引擎内核】DuckDB 向量化与 Morsel-Driven Pipeline

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-06-18T00:00:00Z

本文探讨了ClickHouse与DuckDB的列存引擎,分析了列存文件格式、查询读取路径、MergeTree合并机制及索引特性,旨在帮助数据平台工程师、DBA及嵌入式分析开发者理解列存技术及其在生产环境中的应用与挑战。

【列存引擎内核】ClickHouse 与 DuckDB 源码级拆解

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-06-18T00:00:00Z

DuckDB has recently announced Quack, a new remote protocol over HTTP that lets multiple DuckDB instances connect to and work with the same database over a network. The protocol introduces...

DuckDB Quack: Client/Server Protocol over HTTP for Multi-User Analytics

InfoQ
InfoQ · 2026-05-31T11:17:00Z
为什么MotherDuck拒绝分叉DuckDB

在最近的MCP开发峰会上,MotherDuck的AI负责人Till Döhmen讨论了如何利用DuckDB数据库,使非技术员工能够直接与数据互动。MotherDuck与DuckDB基金会紧密合作,推动数据库的扩展,Döhmen表示他们不打算分叉DuckDB,而是对其进行必要的修改。该公司在开源项目上取得成功,并吸引了风险投资的增长。

为什么MotherDuck拒绝分叉DuckDB

The New Stack
The New Stack · 2026-05-27T19:10:52Z

SwanLake 是基于 Rust 的 Arrow Flight SQL Server,结合 DuckDB 和 DuckLake,旨在提供可部署和可观测的数据服务。它通过五层架构实现高效的查询和会话管理,支持对象存储和元数据统一管理,提升系统的可观测性和性能。

SwanLake:一个基于 DuckDB + DuckLake 的 Arrow Flight SQL 数据湖服务

Rust.cc
Rust.cc · 2026-02-22T02:02:29Z

SwanLake是一个基于Rust的DuckDB服务,旨在简化集成和操作。它结合了DuckDB、DuckLake和Flight SQL,提供高效的查询接口和会话管理,适用于数据湖场景,并注重可观察性,内置状态页面和性能指标,适合生产环境。

SwanLake:基于DuckDB和DuckLake构建的Arrow Flight SQL数据湖服务

Wang Fenjin's Blog
Wang Fenjin's Blog · 2026-02-21T00:00:00Z
使用Python、Parquet和DuckDB构建现代数据分析架构

现代数据分析可以通过使用Parquet文件和DuckDB简化,直接查询数据,避免传统数据库的复杂性。这种方法提高了分析效率,适合批量处理结构化数据。

使用Python、Parquet和DuckDB构建现代数据分析架构

KDnuggets
KDnuggets · 2026-02-10T15:00:03Z

目前有三种将 PostgreSQL 与 DuckDB 集成的方案:pg_duckdb(仅支持存量数据迁移)、pg_mooncake(支持存量和增量数据同步)以及 pg_lake(仅支持全量数据导入)。PostgreSQL 的逻辑复制能力较弱,且缺乏可插拔存储引擎,而 MySQL 的设计更适合支持 DuckDB 的列存,并且其 binlog 机制对生态支持良好。

为什么我认为 MySQL 比 PostgreSQL 集成 DuckDB 更加的优雅?

baotiao
baotiao · 2026-02-04T00:00:00Z

MySQL的插件式存储引擎架构支持多种存储引擎,主要包括默认的InnoDB(适合OLTP)和专为OLAP设计的DuckDB。DuckDB与MySQL兼容,提升查询性能并降低存储成本。

当 MySQL 遇到 DuckDB

baotiao
baotiao · 2026-01-24T00:00:00Z
DuckDB的WebAssembly客户端允许在浏览器中查询Iceberg数据集

DuckDB最近推出了与Iceberg REST Catalogs的无服务器端到端交互,用户无需基础设施设置即可在浏览器中查询、读取和写入Iceberg表。该功能基于DuckDB-Wasm,确保浏览器和本地版本执行相同逻辑,用户可通过演示访问自己的S3表,所有计算在浏览器本地运行。

DuckDB的WebAssembly客户端允许在浏览器中查询Iceberg数据集

InfoQ
InfoQ · 2026-01-04T13:00:00Z
DuckDB - 一款适用于交互式查询、ETL等的分析型嵌入式SQL数据库

DuckDB是一款嵌入式SQL数据库,专注于高性能交互式分析,支持列式存储和向量化执行,适合数据探索和ETL工作,兼容Python、R、Go等多种语言。

DuckDB - 一款适用于交互式查询、ETL等的分析型嵌入式SQL数据库

云原生
云原生 · 2025-11-18T13:18:33Z
【Agentic AI for Data系列】Kiro实战:DuckDB vs Spark技术选型全流程

本文比较了DuckDB与Spark的技术选型,发现DuckDB在处理小文件时速度比Spark快90.4%。通过Agentic AI的Kiro助手,利用自然语言交互自动生成测试方案和代码,显著提高了选型效率,缩短了传统选型周期。

【Agentic AI for Data系列】Kiro实战:DuckDB vs Spark技术选型全流程

亚马逊AWS官方博客
亚马逊AWS官方博客 · 2025-10-31T06:02:47Z
我们对DuckDB、SQLite和Pandas在百万行数据上的性能进行了基准测试:结果如何

本文比较了DuckDB、SQLite和Pandas在处理百万行数据集时的速度和内存效率。结果显示,DuckDB在大多数查询中表现最佳,Pandas在某些情况下速度较快但内存占用较高,而SQLite在速度和内存效率上均较差。总体而言,DuckDB是最优选择。

我们对DuckDB、SQLite和Pandas在百万行数据上的性能进行了基准测试:结果如何

KDnuggets
KDnuggets · 2025-10-10T14:00:17Z
从JSON到仪表板:使用Plotly在Streamlit中可视化DuckDB查询

本文介绍了如何使用Streamlit和Plotly开发简单仪表板,以可视化存储在DuckDB中的JSON数据,帮助非技术人员理解数据。

从JSON到仪表板:使用Plotly在Streamlit中可视化DuckDB查询

KDnuggets
KDnuggets · 2025-08-22T12:00:09Z
7个DuckDB SQL查询,助你节省数小时的Pandas工作

DuckDB是一款可在笔记本中运行的SQL数据库,安装简便,无需服务器。与Pandas相比,DuckDB在处理大数据集时表现更优,支持复杂的过滤、聚合和动态计算,适合数据分析项目。

7个DuckDB SQL查询,助你节省数小时的Pandas工作

KDnuggets
KDnuggets · 2025-07-07T14:00:08Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 模力方舟 Gitee AI 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码