小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

存储工程在介质约束、成本和一致性之间存在取舍。文章分析了HDD、SSD、NVMe等多种存储技术的性能、可靠性和成本,并提供了选型决策框架和存储架构设计方法。

存储工程索引

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-04-22T00:00:00Z
掌握600B+前沿:优化推理云上的大模型部署

随着模型规模的扩大,存储架构优化变得至关重要。超过700GB的模型权重对数据传输速度提出了挑战,导致延迟和成本增加。高性能的NFS和对象存储可以显著提高模型加载速度,减少冷启动时间,提升GPU利用率。通过优化存储和网络,确保GPU高效计算,避免资源浪费。

掌握600B+前沿:优化推理云上的大模型部署

The DigitalOcean Blog
The DigitalOcean Blog · 2026-04-21T20:10:14Z
文档数据库:诚实面对

MongoDB在处理文档型数据时灵活且适合快速迭代,但在处理时间序列数据时性能下降。对于高频率的时间序列数据,使用专门的时间序列数据库(如TimescaleDB)更为合适。迁移到Postgres兼容的时间序列数据库可以解决存储架构问题,同时不影响应用程序的SQL和工具。

文档数据库:诚实面对

Timescale Blog
Timescale Blog · 2026-04-01T17:22:30Z
工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

本文比较了三款主流消息队列(Kafka、RocketMQ、JMQ)的存储架构,分析了它们的存储模型、数据组织和索引设计。Kafka以分区日志流为核心,RocketMQ采用分离式设计,JMQ结合了两者的优点,适应京东场景,为技术选型提供参考。

工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

京东科技开发者
京东科技开发者 · 2026-01-26T08:29:26Z
工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

本文比较了三款主流消息队列(Kafka、RocketMQ、JMQ),分析了它们的存储架构、数据组织和索引设计。Kafka以高吞吐的分区日志流为核心,RocketMQ通过分离式设计优化数据存储与索引查询,JMQ则结合两者优点以满足京东内部需求。文章详细探讨了各自的设计优势和适用场景。

工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

京东科技开发者
京东科技开发者 · 2026-01-13T06:34:21Z
Replit与Tiger Data在代理实验存储方面的经验教训

Replit与Tiger Data探讨了代理开发平台的存储架构,强调传统数据库无法满足代理对可分叉状态的需求。双方认为数据库应支持快照和快速分叉,以适应代理的工作方式。Tiger Data的Fluid Storage专为实验和运营工作负载设计,提供低延迟和高效的存储解决方案,支持持续实验。

Replit与Tiger Data在代理实验存储方面的经验教训

Timescale Blog
Timescale Blog · 2025-12-22T21:31:34Z

Talos Linux 是为 Kubernetes 设计的不可变操作系统,具备安全性和自动更新功能;Longhorn 是分布式块存储解决方案,支持副本管理和灾难恢复。两者结合可构建稳定的云原生存储架构,满足有状态应用需求。

Talos Linux 与 Longhorn:构建现代化 Kubernetes 存储解决方案

极客技术博客’s Blog
极客技术博客’s Blog · 2025-12-01T10:00:16Z
Fluid Storage:为代理时代提供可分叉、短暂且持久的基础设施

Fluid Storage是一种新一代存储架构,具备弹性和零拷贝分叉,兼容Postgres等数据库,支持快速扩展和缩减,提供一致的性能和可预测的成本,满足现代开发者和代理的需求。

Fluid Storage:为代理时代提供可分叉、短暂且持久的基础设施

Timescale Blog
Timescale Blog · 2025-10-29T14:04:52Z
Cloudflare在GCP服务中断后重新架构Workers KV,实现40倍性能提升

Cloudflare最近重新设计了Workers KV,采用混合存储架构,将全球键值存储的读取延迟从200毫秒降低至5毫秒。这一改进源于2025年6月12日的GCP服务中断,Cloudflare优化了存储系统,结合了自有分布式数据库和R2对象存储,通过大小路由自动处理对象,提高了效率和一致性,以适应高读取负载。

Cloudflare在GCP服务中断后重新架构Workers KV,实现40倍性能提升

InfoQ
InfoQ · 2025-08-25T12:30:00Z
重新设计Workers KV以提高可用性和加快性能

2025年6月12日,Cloudflare的Workers KV服务因第三方云故障发生重大宕机。为防止类似事件,Cloudflare已将数据迁移至自有基础设施,并优化存储架构,以提升性能、可用性和冗余性,确保低延迟。

重新设计Workers KV以提高可用性和加快性能

The Cloudflare Blog
The Cloudflare Blog · 2025-08-08T13:00:00Z
优化高容量、高速度数据的数据湖存储架构

在大数据时代,管理海量信息至关重要。数据湖作为集中存储库,面临数据量和速度的挑战。文章探讨了优化数据湖存储架构的技术,包括选择合适的文件格式(如Parquet、ORC、Avro)、有效的数据分区、索引策略和压缩算法。Delta Lake提供ACID事务和统一处理能力,提升数据湖的可靠性。持续监控和自动化工具对维护高效的数据湖也至关重要。

优化高容量、高速度数据的数据湖存储架构

DEV Community
DEV Community · 2025-02-09T12:48:17Z
存储革命:GPU在现代基础设施中的作用

人工智能工作负载的增加正在推动企业基础设施的存储架构变革。传统存储方法无法满足现代AI的需求,尤其是在GPU成为关键组件的背景下。存储系统需要支持高并发的数据访问,并能够处理多种数据类型。基础设施团队必须重新评估存储策略,以确保GPU的高效利用,迎接未来AI工作负载的挑战。

存储革命:GPU在现代基础设施中的作用

The New Stack
The New Stack · 2024-11-20T14:32:34Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码