Apache软件基金会宣布新的顶级项目

Apache软件基金会宣布新的顶级项目

💡 原文英文,约400词,阅读约需2分钟。
📝

内容提要

Apache Uniffle已从孵化阶段毕业,成为顶级项目,提供高性能的分布式计算远程洗牌服务,广泛应用于腾讯、爱奇艺等公司,减少了数据洗牌中的连接和内存故障,支持多种数据处理框架。

🎯

关键要点

  • Apache Uniffle已从孵化阶段毕业,成为顶级项目。
  • Uniffle提供高性能的分布式计算远程洗牌服务。
  • 该服务减少了数据洗牌中的连接和内存故障。
  • Uniffle被腾讯、爱奇艺、滴滴、顺丰、唯品会和哔哩哔哩等公司广泛应用。
  • 每天处理的洗牌数据超过PB级,支持数万个应用程序。
  • Uniffle支持Apache Hadoop、Apache Spark和Apache Tez等多种数据处理框架。
  • Apache软件基金会为项目提供服务和指导,促进健康社区的建立。
  • Apache软件基金会成立于1999年,是开源软件的全球家园。

延伸问答

Apache Uniffle是什么?

Apache Uniffle是一个高性能的分布式计算远程洗牌服务,已成为Apache软件基金会的顶级项目。

Apache Uniffle的主要应用场景有哪些?

Apache Uniffle被腾讯、爱奇艺、滴滴、顺丰、唯品会和哔哩哔哩等公司广泛应用。

Apache Uniffle如何提高数据洗牌的性能?

Uniffle通过减少连接和随机I/O,降低了大规模作业中的内存故障,从而提高了数据洗牌的性能。

Apache Uniffle支持哪些数据处理框架?

Apache Uniffle支持Apache Hadoop、Apache Spark和Apache Tez等多种数据处理框架。

Apache软件基金会的角色是什么?

Apache软件基金会为项目提供服务和指导,促进健康社区的建立,支持开源项目的发展。

Apache Uniffle的日处理数据量是多少?

Apache Uniffle每天处理的洗牌数据超过PB级。

➡️

继续阅读