陈少文的博客
·
使用 Fluid 对接 S3 存储及性能测试
💡
原文中文，约2300字，阅读约需6分钟。
📝
内容提要
本文介绍了在 Kubernetes 中配置 Jindo 以挂载 S3 存储的步骤，包括设置环境变量、创建凭证和数据集、配置 JindoRuntime 以及创建 Pod 进行性能测试。测试结果显示了大文件和小文件的读写速度，并提供了清理资源的步骤。
🎯
关键要点
- 配置环境变量，包括 ENDPOINT、BUCKET、AK 和 SK。
- 创建 S3 存储的凭证，使用 Kubernetes Secret 进行管理。
- 创建 Dataset，指定挂载点和访问凭证。
- 创建 JindoRuntime，设置副本数和存储配额。
- 创建 Pod 进行负载测试，指定容器和挂载卷。
- 执行性能测试，记录大文件和小文件的读写速度。
- 清理资源，包括删除创建的 Secret、Dataset 和 JindoRuntime。
❓
延伸问答
如何在 Kubernetes 中配置 Jindo 以挂载 S3 存储？
需要设置环境变量、创建凭证和数据集、配置 JindoRuntime，并创建 Pod 进行性能测试。
在 Kubernetes 中创建 S3 存储凭证的步骤是什么？
使用 Kubernetes Secret 创建凭证，包含访问密钥和秘密密钥。
如何执行性能测试以评估 S3 存储的读写速度？
进入 Pod 后安装 JuiceFS 客户端，使用命令进行基准测试，记录读写速度。
性能测试的结果显示了哪些读写速度？
大文件写入速度为394.04 MiB/s，读取速度为304.28 MiB/s；小文件写入速度为7.0 files/s，读取速度为18.2 files/s。
如何清理在 Kubernetes 中创建的资源？
使用 kubectl 命令删除创建的 Secret、Dataset 和 JindoRuntime。
JindoRuntime 的配置需要哪些参数？
需要设置副本数、存储配额和存储介质类型等参数。
➡️
