💡
原文英文，约500词，阅读约需2分钟。
📝
内容提要
Lyft将其机器学习平台LyftLearn重构为混合系统，离线工作负载迁移至AWS SageMaker，在线模型服务保留在Kubernetes上。这一变革简化了操作复杂性，提高了工程效率，并支持数百万次日常预测，同时确保与现有ML代码兼容，减少基础设施事件，提升平台能力。
🎯
关键要点
- Lyft将机器学习平台LyftLearn重构为混合系统，离线工作负载迁移至AWS SageMaker，在线模型服务保留在Kubernetes上。
- 这一变革简化了操作复杂性，提高了工程效率，并支持数百万次日常预测。
- Lyft的工程师将LyftLearn Compute迁移至AWS SageMaker，消除了背景监视服务和集群自动扩展的挑战。
- LyftLearn Serving仍然在Kubernetes上，保持了所需的性能和与内部工具的紧密集成。
- Lyft选择SageMaker进行训练是因为管理自定义批处理计算基础设施消耗了大量工程能力。
- LyftLearn支持数亿次日常预测，系统的操作复杂性随着规模的增长而增加。
- SageMaker的托管基础设施直接解决了离线工作负载的痛点，采用事件驱动的状态管理。
- Lyft构建了跨平台的Docker镜像，以在SageMaker中复制Kubernetes运行时环境。
- 最复杂的挑战是Spark在SageMaker Studio和EKS集群之间的双向通信需求。
- 迁移是逐个代码库部署的，两种基础设施并行运行，仅需最小的配置更改。
- 迁移后，Lyft报告基础设施事件减少，工程能力得以释放。
🏷️