小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
沉浸式翻译 immersive translate
Dify.AI

BrewFS 是面向AI Agent的Rust分布式文件系统,通过FUSE/VFS支持POSIX接口,兼容S3存储及多种元数据后端。测试显示其混合随机I/O性能优于JuiceFS,如吞吐高92%、随机读高37%,并通过xfstest等验证正确性。它优化了Agent工作负载,但非全场景领先,代码公开可复现。

BrewFS:面向 AI Agent 工作负载的 Rust 原生分布式文件系统

Rust.cc Rust.cc · 2026-07-31T09:58:04Z

NFS(网络文件系统)是一种分布式文件系统协议,使客户端能够像访问本地存储一样访问服务器文件。文章介绍了NFS的核心概念、搭建步骤、权限控制、性能优化和监控方法,以帮助运维人员提高工作效率,节省文件同步时间。

万字长文:NFS服务部署与性能优化完全指南(2025最新)

运维派 运维派 · 2025-09-03T09:48:08Z

3FS是为AI训练设计的分布式文件系统,其关键功能USRBIO允许用户态应用直接提交I/O请求,提升性能。通过零拷贝和异步I/O,USRBIO适合高吞吐量场景,如AI数据处理,利用共享内存和批处理I/O请求显著降低开销,特别适合PB级数据集的处理。

3FS Usrbio 简介

代码范 代码范 · 2025-04-06T04:45:15Z

DeepSeek 开源周发布的 3FS 是为 AI 高性能计算设计的分布式并行文件系统,优化大规模数据集处理,支持高 IOPS 和吞吐量,提升推理任务性能。

DeepSeek AI开源周5/5:开源高性能分布式并行文件系统3FS优化大规模数据集处理

蓝点网 蓝点网 · 2025-02-28T01:57:39Z
图解 JuiceFS CSI 工作流:K8s 创建带 PV 的 Pod 时,背后发生了什么(2024)

JuiceFS 是一个基于对象存储的分布式文件系统,支持 Kubernetes 的 CSI 机制。本文介绍了在创建带 PV 的 pod 及其读写过程中,Kubernetes 和 JuiceFS 组件的工作原理,包括 CSI 插件的部署和挂载流程。JuiceFS 通过低级 API 提高性能,并动态管理客户端 pod 的挂载,确保业务 pod 能顺利读写数据。

图解 JuiceFS CSI 工作流:K8s 创建带 PV 的 Pod 时,背后发生了什么(2024)

ARTHURCHIAO'S BLOG ARTHURCHIAO'S BLOG · 2024-07-13T00:00:00Z
Hadoop HDFS

Hadoop HDFS是一个分布式文件系统,用于高吞吐量的数据存储和访问。它具有高容错性、高吞吐量、可扩展性和流式数据访问等特性。HDFS的架构由一个NameNode和多个DataNode组成,通过数据块的冗余存储实现高容错性。操作命令包括创建文件夹、查看文件、复制文件、移动文件等。权限管理和文件系统健康状况检查也是重要功能。

Hadoop HDFS

Anjhon’s Blog Anjhon’s Blog · 2024-07-07T16:00:00Z

NFS是一种分布式文件系统协议,用于在计算机网络上实现文件共享。NFS允许客户端通过网络访问和处理服务器上的文件和目录。配置NFS需要在服务器上建立共享目录并设置权限,然后在客户端上挂载共享目录。NFS是一个成熟且广泛应用的文件共享协议,被用于各种操作系统和应用场景。

一文精通 Linux 配置 NFS 文件共享

良许Linux教程网 良许Linux教程网 · 2024-03-21T12:16:36Z
AI 大模型的下一步,或许是 Google 早年的那种便宜的方案

文章探讨了Google如何通过创新的软件解决方案降低硬件成本,从而超越竞争对手。Google利用分布式文件系统和MapReduce框架,实现了高效的计算和存储。这一经验对当前AI领域,特别是在降低大模型成本方面,具有启示意义。

AI 大模型的下一步,或许是 Google 早年的那种便宜的方案

王建硕的博客 王建硕的博客 · 2023-08-22T04:22:26Z

数据的价值,决定了存储系统的价值。面对爆炸性增长的非结构化数据,以及复杂多变的业务需求,我们需要创造性的思维,从零开始思考和设计新一代的分布式文件系统。 在 SmartX 你将有机会与最优秀的存储工程师一起工作,构建新一代的分布式文件系统,使得应用系统随时随地都可以安全且高效的存储和访问数据。 分布式文件系统研发工程师 - 北京 多个职位空缺!! 实习生/ 校招/ 社招均可 欢迎同学们联系...

【北京 实习生招聘】分布式文件系统研发工程师,薪资福利优厚+稳定,欢迎热爱Rust的你加入 SmartX!

Rust.cc Rust.cc · 2023-01-11T09:46:58Z
Juice FS 初探 | 一种为 VPS 提供无限磁盘空间的解决方案

JuiceFS 是一款高性能的分布式文件系统,支持 POSIX 兼容性,可以将云存储挂载为本地磁盘。本文介绍了在腾讯云上使用 JuiceFS 的方法,包括创建、挂载和卸载文件系统的命令,以及容量和文件数量的限制设置和性能测试结果。JuiceFS 适合与 Docker 和 Kubernetes 等容器技术结合使用。

Juice FS 初探 | 一种为 VPS 提供无限磁盘空间的解决方案

Frytea's Blog Frytea's Blog · 2022-11-20T13:56:00Z

数据的价值,决定了存储系统的价值。面对爆炸性增长的非结构化数据,以及复杂多变的业务需求,我们需要创造性的思维,从零开始思考和设计新一代的分布式文件系统。 在 SmartX 你将有机会与最优秀的存储工程师一起工作,构建新一代的分布式文件系统,使得应用系统随时随地都可以安全且高效的存储和访问数据。 分布式文件系统研发工程师 - 北京 - 社招/校招 欢迎联系 HR Tingyu...

【北京】分布式文件系统研发工程师,薪资福利优厚+稳定,欢迎热爱Rust的你加入 SmartX!

Rust.cc Rust.cc · 2022-09-16T07:44:53Z
IPFS - Content Addressed, Versioned, P2P File System

IPFS(星际文件系统)是一个分布式文件系统,旨在通过P2P网络连接所有计算设备,取代HTTP。它基于去中心化理念,使用静态加密谜题生成节点ID,确保通信安全。IPFS采用Merkle DAG结构进行内容定位和去重,并通过BitSwap协议交换数据。尽管有效解决了数据检索和完整性问题,但缺乏节点激励和数据持久性保障。Filecoin通过区块链激励机制旨在解决这些问题。

IPFS - Content Addressed, Versioned, P2P File System

Xuanwo's Blog Xuanwo's Blog · 2021-05-03T01:00:00Z

本文基于内部分享 <“抄"能力养成系列 – GFS 设计> 整理. 2003 年开始 Google 陆续放出三套系统的设计(GFS/MapReduce/Bigtable), 在互联网届掀起云计算狂潮一直影响至今. 该论文一出, 便催生了 Hadoop 中的 HDFS 的诞生. GFS 作为发轫, 目前许多业界知名的分布式系统设计仍然有着它的影子. 下面就让我们一起看看 GFS 的设计,...

GFS: 一个高可用可扩展的分布式文件系统

二手知识 二手知识 · 2020-12-11T21:44:47Z

文件系统是操作系统 IO 栈里非常重要的一个中间层,其存在的意义是为了让上层应用程序有一层更加符合人类直觉的抽象来进行文档的读写,而无需考虑底层存储上的细节。 本地文件系统 在讨论分布式文件系统前,我们先来回顾下本地文件系统的组成。 存储结构 在前面一张图里,我们能够看到文件系统直接和通用块层进行交互,无论底层存储介质是磁盘还是 SSD,都被该层抽象为 Block...

分布式文件系统的演化

Joway's Blog Joway's Blog · 2020-06-14T00:00:00Z

对于文件存储来说,一般情况下简单的处理就是在Django配置文件中配置存储目录,按照规则对文件进行上传或者下载。实际上,当文件较少的时候,Django是可以应付的过来的。但当文件以海量形式出现的时候,Django就并不是那么好用了,于是FastDFS应运而出。FastDFS是一个开源的分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容...

利用Docker来搭建分布式文件系统FastDfs

刘悦 刘悦 · 2019-05-19T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 1tok 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator 模力方舟 Gitee AI

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码