亚马逊AWS官方博客
·
通过 AWS DTH 和 Amazon S3 File Gateway 实现海外数据的定时同步和本地访问
💡
原文中文，约7500字，阅读约需18分钟。
📝
内容提要
该文介绍了一家专注于计算机三维影像和数字动画内容制作和服务的公司A，通过采用AWS数据传输解决方案和AWS Storage Gateway解决了与海外兄弟公司之间的数据传输问题。方案包括建立海外Amazon S3到中国区Amazon S3的同步关系，部署S3 File Gateway，创建定时刷新Storage Gateway缓存的方案等。整个方案基于按需付费，提供高效复制和本地访问的性能，同时控制成本。
🎯
关键要点
- A公司专注于计算机三维影像和数字动画内容的制作与服务。
- A公司与海外兄弟单位之间的数据传输效率低且成本高。
- 客户需求包括与多家海外单位进行数百TB到数PB的数据交互。
- A公司采用AWS数据传输解决方案和AWS Storage Gateway来解决数据传输问题。
- 方案包括在中国区开启Amazon S3服务，建立海外与中国区的同步关系。
- DTH（AWS数据传输解决方案）支持跨区域数据传输，速度快且成本低。
- AWS Storage Gateway提供低延迟的数据访问，支持本地应用程序访问云端数据。
- 方案中使用AWS DTH的Amazon S3数据传输插件进行定时同步。
- 实施步骤包括建立Amazon S3同步关系、配置ECS集群和启动AWS Cloudformation部署。
- Storage Gateway的文件共享设置为只读，以节省成本。
- 定时刷新Storage Gateway缓存方案确保最新数据可见。
- 使用Cloudwatch监控数据传输任务状态，并通过SNS发送通知。
- 整个方案基于按需付费，性价比高，避免了不必要的费用。
- Amazon S3 File Gateway的本地SSD缓存提高访问速度，降低访问费用。
- Dynamodb中存放传输文件清单，客户可通过API进行检查。
➡️
