小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

存储工程在介质约束、成本和一致性之间存在取舍。文章分析了HDD、SSD、NVMe等多种存储技术的性能、可靠性和成本,并提供了选型决策框架和存储架构设计方法。

存储工程索引

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-04-22T00:00:00Z
掌握600B+前沿:优化推理云上的大模型部署

随着模型规模的扩大,存储架构优化变得至关重要。超过700GB的模型权重对数据传输速度提出了挑战,导致延迟和成本增加。高性能的NFS和对象存储可以显著提高模型加载速度,减少冷启动时间,提升GPU利用率。通过优化存储和网络,确保GPU高效计算,避免资源浪费。

掌握600B+前沿:优化推理云上的大模型部署

The DigitalOcean Blog
The DigitalOcean Blog · 2026-04-21T20:10:14Z
文档数据库:诚实面对

MongoDB在处理文档型数据时灵活且适合快速迭代,但在处理时间序列数据时性能下降。对于高频率的时间序列数据,使用专门的时间序列数据库(如TimescaleDB)更为合适。迁移到Postgres兼容的时间序列数据库可以解决存储架构问题,同时不影响应用程序的SQL和工具。

文档数据库:诚实面对

Timescale Blog
Timescale Blog · 2026-04-01T17:22:30Z
工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

本文比较了三款主流消息队列(Kafka、RocketMQ、JMQ)的存储架构,分析了它们的存储模型、数据组织和索引设计。Kafka以分区日志流为核心,RocketMQ采用分离式设计,JMQ结合了两者的优点,适应京东场景,为技术选型提供参考。

工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

京东科技开发者
京东科技开发者 · 2026-01-26T08:29:26Z
工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

本文比较了三款主流消息队列(Kafka、RocketMQ、JMQ),分析了它们的存储架构、数据组织和索引设计。Kafka以高吞吐的分区日志流为核心,RocketMQ通过分离式设计优化数据存储与索引查询,JMQ则结合两者优点以满足京东内部需求。文章详细探讨了各自的设计优势和适用场景。

工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

京东科技开发者
京东科技开发者 · 2026-01-13T06:34:21Z
Replit与Tiger Data在代理实验存储方面的经验教训

Replit与Tiger Data探讨了代理开发平台的存储架构,强调传统数据库无法满足代理对可分叉状态的需求。双方认为数据库应支持快照和快速分叉,以适应代理的工作方式。Tiger Data的Fluid Storage专为实验和运营工作负载设计,提供低延迟和高效的存储解决方案,支持持续实验。

Replit与Tiger Data在代理实验存储方面的经验教训

Timescale Blog
Timescale Blog · 2025-12-22T21:31:34Z

Talos Linux 是为 Kubernetes 设计的不可变操作系统,具备安全性和自动更新功能;Longhorn 是分布式块存储解决方案,支持副本管理和灾难恢复。两者结合可构建稳定的云原生存储架构,满足有状态应用需求。

Talos Linux 与 Longhorn:构建现代化 Kubernetes 存储解决方案

极客技术博客’s Blog
极客技术博客’s Blog · 2025-12-01T10:00:16Z
Fluid Storage:为代理时代提供可分叉、短暂且持久的基础设施

Fluid Storage是一种新一代存储架构,具备弹性和零拷贝分叉,兼容Postgres等数据库,支持快速扩展和缩减,提供一致的性能和可预测的成本,满足现代开发者和代理的需求。

Fluid Storage:为代理时代提供可分叉、短暂且持久的基础设施

Timescale Blog
Timescale Blog · 2025-10-29T14:04:52Z
Cloudflare在GCP服务中断后重新架构Workers KV,实现40倍性能提升

Cloudflare最近重新设计了Workers KV,采用混合存储架构,将全球键值存储的读取延迟从200毫秒降低至5毫秒。这一改进源于2025年6月12日的GCP服务中断,Cloudflare优化了存储系统,结合了自有分布式数据库和R2对象存储,通过大小路由自动处理对象,提高了效率和一致性,以适应高读取负载。

Cloudflare在GCP服务中断后重新架构Workers KV,实现40倍性能提升

InfoQ
InfoQ · 2025-08-25T12:30:00Z
重新设计Workers KV以提高可用性和加快性能

2025年6月12日,Cloudflare的Workers KV服务因第三方云故障发生重大宕机。为防止类似事件,Cloudflare已将数据迁移至自有基础设施,并优化存储架构,以提升性能、可用性和冗余性,确保低延迟。

重新设计Workers KV以提高可用性和加快性能

The Cloudflare Blog
The Cloudflare Blog · 2025-08-08T13:00:00Z
优化高容量、高速度数据的数据湖存储架构

在大数据时代,管理海量信息至关重要。数据湖作为集中存储库,面临数据量和速度的挑战。文章探讨了优化数据湖存储架构的技术,包括选择合适的文件格式(如Parquet、ORC、Avro)、有效的数据分区、索引策略和压缩算法。Delta Lake提供ACID事务和统一处理能力,提升数据湖的可靠性。持续监控和自动化工具对维护高效的数据湖也至关重要。

优化高容量、高速度数据的数据湖存储架构

DEV Community
DEV Community · 2025-02-09T12:48:17Z
存储革命:GPU在现代基础设施中的作用

人工智能工作负载的增加正在推动企业基础设施的存储架构变革。传统存储方法无法满足现代AI的需求,尤其是在GPU成为关键组件的背景下。存储系统需要支持高并发的数据访问,并能够处理多种数据类型。基础设施团队必须重新评估存储策略,以确保GPU的高效利用,迎接未来AI工作负载的挑战。

存储革命:GPU在现代基础设施中的作用

The New Stack
The New Stack · 2024-11-20T14:32:34Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 模力方舟 Gitee AI 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码