Koordinator 支持 K8s 与 YARN 混部,小红书在离线混部实践分享

💡 原文中文,约3000字,阅读约需8分钟。
📝

内容提要

Koordinator是一个开源项目,支持K8s生态内的在离线混部。小红书与阿里云、蚂蚁金服合作启动了Hadoop YARN与K8s混部项目,已在小红书生产环境使用。通过打通K8s调度器与YARN调度器之间的资源视图,实现了Spark任务在在线闲时资源上稳定运行,提升资源利用率并降低成本。

🏷️

标签

➡️

继续阅读