Databricks
·
宣布Zerobus Ingest的正式发布，作为Lakeflow Connect的一部分
内容提要
Zerobus Ingest是一种无服务器的数据流服务，简化了传统流架构，直接将数据推送至Lakehouse，降低成本并提升性能。它支持高并发连接，消除中间消息总线的复杂性，减少运营开销，适用于多种开发接口。
关键要点
-
Zerobus Ingest是一种无服务器的数据流服务，简化了传统流架构，直接将数据推送至Lakehouse。
-
Zerobus Ingest降低了成本并提升了性能，支持高并发连接，达到每秒超过10GB的吞吐量。
-
传统消息总线如Kafka的多接收器架构增加了复杂性和成本，而Zerobus Ingest采用单接收器架构，优化了数据直接推送至Lakehouse的过程。
-
Zerobus Ingest简化了传统流架构，从五个管理系统减少到两个组件，消除了多个故障点，降低了运营开销。
-
开发者可以通过gRPC和REST API或语言特定的SDK进行集成，支持多种行业特定的推送接口。
-
每次写入都由Unity Catalog管理，确保数据流的统一治理和自动追踪。
-
丰田汽车利用Zerobus Ingest实现实时制造监控，支持其碳中和战略和运营效率。
-
Joby Aviation通过Zerobus Ingest每分钟将飞机遥测数据流直接传输至Lakehouse，实现近实时的飞行性能分析。
延伸解读
Zerobus Ingest的架构优势
Zerobus Ingest采用单接收器架构，简化了传统流架构，减少了管理系统的数量。这种设计不仅降低了运营成本，还消除了多个故障点，使得数据流动更加高效。对于需要实时数据处理的企业来说，这种简化的架构能够显著提升响应速度和决策效率。
适用场景与行业应用
Zerobus Ingest适用于多种行业，尤其是需要实时数据监控和分析的领域，如制造业和航空业。丰田和Joby Aviation的案例表明，Zerobus Ingest能够帮助企业快速获取关键数据，从而支持其运营效率和可持续发展目标。企业在选择数据流服务时，应考虑自身的行业特点和实时数据需求。
开发者集成的灵活性
Zerobus Ingest支持多种开发接口，包括gRPC和REST API，适合不同的应用场景。开发者可以根据项目需求选择最合适的集成方式，这种灵活性使得Zerobus Ingest能够更好地适应各种技术栈和业务需求，降低了开发和维护的复杂性。
延伸问答
Zerobus Ingest是什么？
Zerobus Ingest是一种无服务器的数据流服务，能够直接将数据推送至Lakehouse，简化传统流架构。
Zerobus Ingest如何降低成本？
Zerobus Ingest通过消除中间消息总线和简化架构，减少了计算和存储成本，从而降低了每千兆字节的摄取成本。
Zerobus Ingest支持哪些开发接口？
Zerobus Ingest支持gRPC和REST API，以及多种语言特定的SDK，适用于行业特定的推送接口。
Zerobus Ingest的架构与传统消息总线有何不同？
Zerobus Ingest采用单接收器架构，直接将数据推送至Lakehouse，避免了传统消息总线的复杂性和高成本。
Zerobus Ingest如何帮助丰田汽车？
丰田汽车利用Zerobus Ingest实现实时制造监控，快速检测工厂设备的过热情况，支持其碳中和战略。
Joby Aviation如何利用Zerobus Ingest进行数据分析？
Joby Aviation通过Zerobus Ingest每分钟将飞机遥测数据流直接传输至Lakehouse，实现近实时的飞行性能分析。
