freeCodeCamp.org
·
如何使用AWS CLI进行大文件的分段上传到S3
💡
原文英文，约1700词，阅读约需7分钟。
📝
内容提要
上传大于5GB的文件到S3使用传统单请求方法非常困难，建议使用分段上传功能。本文介绍了通过AWS CLI进行分段上传的步骤，包括配置AWS IAM凭证、分割文件、创建S3桶、上传文件和完成上传。这种方法提高了上传的可靠性和效率。
🎯
关键要点
- 上传大于5GB的文件到S3使用传统单请求方法非常困难，建议使用分段上传功能。
- 分段上传将大文件分割成较小的独立块，分别上传并在S3上重新组装。
- 进行分段上传前需要安装AWS CLI并配置AWS IAM凭证。
- 分段上传的步骤包括：分割文件、创建S3桶、初始化分段上传、上传分割文件、创建JSON文件编译ETag值、完成分段上传。
- 分段上传提高了上传的可靠性和效率，适用于数据库备份、视频文件等大文件的传输。
❓
延伸问答
如何使用AWS CLI进行大文件的分段上传？
使用AWS CLI进行大文件的分段上传需要先安装AWS CLI并配置IAM凭证，然后分割文件、创建S3桶、初始化分段上传、上传分割文件、创建JSON文件编译ETag值，最后完成分段上传。
分段上传的优势是什么？
分段上传提高了上传的可靠性和效率，允许在网络中断时重新上传失败的部分，适用于大于5GB的文件传输。
在进行分段上传前需要准备什么？
在进行分段上传前，需要安装AWS CLI并配置AWS IAM凭证，确保有一个AWS账户和S3桶。
如何创建S3桶？
可以通过AWS管理控制台或AWS CLI创建S3桶，具体步骤可以参考AWS的官方文档。
分段上传的文件如何验证上传成功？
可以使用命令aws s3api list-parts来验证上传的文件部分是否成功，查看返回的JSON响应中的Parts信息。
如何处理分段上传中的ETag值？
在上传每个分段文件后，AWS会返回一个ETag值，需要将这些ETag值整理成JSON格式，并在完成上传时使用。
➡️
