小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
Postgres to Iceberg in 13 minutes: How Supermetal compares to Flink, Kafka Connect, and Spark

Supermetal在将Postgres数据写入Iceberg时表现优异,快照仅需13分钟,远快于Flink(90-116分钟)、Kafka Connect(120分钟)和Spark(超过3小时)。其优势在于根据CDC源阶段切换配置选项以优化性能,测试显示Supermetal在未调优情况下快照性能至少比其他工具快7倍,主要得益于快速的CDC源和低序列化开销。

Postgres to Iceberg in 13 minutes: How Supermetal compares to Flink, Kafka Connect, and Spark

The New Stack
The New Stack · 2026-04-15T15:00:00Z
分享四款开源且实用的 Kafka 管理工具

本文介绍了四款开源的Kafka管理工具:KnowStreaming、Kafka-King、Kafbat UI和Kouncil。这些工具提供可视化管理、简化操作和监控功能,旨在提升Kafka的运维效率和用户体验。

分享四款开源且实用的 Kafka 管理工具

dotNET跨平台
dotNET跨平台 · 2026-04-12T00:02:20Z
海尔智家 x 阿里云 Kafka 实践:轻松支撑百亿级消息,稳定性与效率双提升

海尔智家与阿里云合作,将AIoT平台的Kafka集群迁移至云端,提升了系统稳定性和运维效率,系统可用性达到99.99%,消息处理能力显著提高,团队得以专注于业务创新与架构优化。

海尔智家 x 阿里云 Kafka 实践:轻松支撑百亿级消息,稳定性与效率双提升

实时互动网
实时互动网 · 2026-03-31T02:51:45Z

Peter Morgan introduced Tansu at QCon London, an open-source, Kafka-compatible, stateless, leaderless broker that scales to zero, with pluggable storage (S3, SQLite, Postgres), broker-side schema...

QCon London 2026: Introducing Tansu.io — Rethinking Kafka for Lean Operations

InfoQ
InfoQ · 2026-03-21T10:01:00Z
Reddit如何将PB级Kafka从EC2迁移到Kubernetes

Reddit成功将超过500个Kafka代理和超过1PB的数据从EC2迁移到Kubernetes,整个过程无停机。迁移分为多个阶段,包括引入DNS中介、增加新代理、混合集群运行、逐步转移数据和控制平面迁移。通过小步、可逆的方式,Reddit确保了系统稳定性,避免了数据丢失和服务中断。

Reddit如何将PB级Kafka从EC2迁移到Kubernetes

ByteByteGo Newsletter
ByteByteGo Newsletter · 2026-03-17T15:30:44Z
Confluent在重大平台更新中新增A2A支持、异常检测和Kafka队列

Confluent最近推出了对Agent2Agent(A2A)协议的支持,允许用户通过Apache Kafka实现代理间通信。该平台支持同步和异步协议,增强了代理的实时能力,并利用机器学习进行多变量异常检测,帮助企业识别异常情况,提高数据驱动决策的效率。

Confluent在重大平台更新中新增A2A支持、异常检测和Kafka队列

The New Stack
The New Stack · 2026-03-03T18:21:51Z

本文介绍了如何利用两个 UNIX 信号(SIGUSR1 和 SIGUSR2)实现简易消息队列。通过将信号映射为二进制位,发送和接收进程可以进行基本的进程间通信。尽管这种方法在生产环境中不可靠且效率低下,但它有助于理解底层进程间通信的原理。

谁还需要 Kafka 啊?我用两个 UNIX 信号手捏了一个消息队列!

烟草的香味
烟草的香味 · 2026-02-25T03:58:56Z
uForwarder:Uber高效事件驱动微服务的可扩展Kafka消费者代理

Uber工程团队推出了uForwarder,这是一个开源的Apache Kafka推送代理,旨在提升高吞吐量事件流的可扩展性和效率。uForwarder简化了消费者逻辑,集中管理偏移量,隔离工作负载,并提供内置延迟处理,解决了Uber内部Kafka部署的多个挑战,成为主要的Kafka消费者选项,提升了资源利用率和性能一致性。

uForwarder:Uber高效事件驱动微服务的可扩展Kafka消费者代理

InfoQ
InfoQ · 2026-02-23T15:00:00Z
EP203:RabbitMQ与Kafka与Pulsar的比较

npx workos推出了一款基于Claude技术的AI代理,能够自动读取项目代码并生成完整的身份验证集成,具备理解代码框架、类型检查和错误修复的能力。文章还讨论了RabbitMQ、Kafka和Pulsar的区别,以及REST与GraphQL的优缺点。

EP203:RabbitMQ与Kafka与Pulsar的比较

ByteByteGo Newsletter
ByteByteGo Newsletter · 2026-02-21T16:30:27Z
一款现代化、跨平台、实用的 Kafka GUI 客户端

Kafka-King 是一款易用的跨平台 Kafka GUI 客户端,支持集群管理、主题管理和消息查看,兼容多版本 Kafka,提供安全连接和多语言支持。

一款现代化、跨平台、实用的 Kafka GUI 客户端

dotNET跨平台
dotNET跨平台 · 2026-02-08T02:17:05Z
LinkedIn重新架构服务发现:在大规模环境中用Kafka和xDS替代Zookeeper

LinkedIn升级了基于ZooKeeper的服务发现平台,采用Apache Kafka和xDS协议,实现可扩展架构。新系统支持最终一致性,允许非Java客户端参与。通过“双模式”策略,团队实现了零停机迁移,解决了ZooKeeper的性能瓶颈,显著提升了数据传播速度和系统可扩展性。

LinkedIn重新架构服务发现:在大规模环境中用Kafka和xDS替代Zookeeper

InfoQ
InfoQ · 2026-02-05T01:21:00Z
工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

本文比较了三款主流消息队列(Kafka、RocketMQ、JMQ)的存储架构,分析了它们的存储模型、数据组织和索引设计。Kafka以分区日志流为核心,RocketMQ采用分离式设计,JMQ结合了两者的优点,适应京东场景,为技术选型提供参考。

工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

京东科技开发者
京东科技开发者 · 2026-01-26T08:29:26Z

OpenResty与Kafka结合在高并发服务中表现优异,但直接交互时存在性能瓶颈。为此,团队开发了lua-resty-kafka-fast,提供非阻塞Kafka客户端,优化API网关性能,降低延迟和运维复杂度,适用于高并发事件驱动系统。

拒绝阻塞:如何在 OpenResty 边缘节点弥合与 Kafka 的“运行时”鸿沟

OpenResty 官方博客
OpenResty 官方博客 · 2026-01-19T00:00:00Z
为什么你应该停止手动管理Kafka – Kafka UI和Cruise Control指南

超过80%的财富100强公司使用Apache Kafka,但管理其集群面临挑战。手动管理繁琐且易出错,集群规模扩大后操作复杂度增加。本文介绍Kafka UI和Cruise Control两种工具,以简化集群管理,提高效率。

为什么你应该停止手动管理Kafka – Kafka UI和Cruise Control指南

freeCodeCamp.org
freeCodeCamp.org · 2026-01-14T15:58:54Z
工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

本文比较了三款主流消息队列(Kafka、RocketMQ、JMQ),分析了它们的存储架构、数据组织和索引设计。Kafka以高吞吐的分区日志流为核心,RocketMQ通过分离式设计优化数据存储与索引查询,JMQ则结合两者优点以满足京东内部需求。文章详细探讨了各自的设计优势和适用场景。

工程师之夜系列分享第三十九篇:Kafka、RocketMQ、JMQ 存储架构深度对比

京东科技开发者
京东科技开发者 · 2026-01-13T06:34:21Z
Kafka 如何简化应用集成与现代化

企业应用程序生成的数据通常分散在不同系统中,难以共享。Apache Kafka 提供了一个集中平台,简化数据集成,促进数据重用,支持实时和历史数据访问,从而帮助企业提升决策和创新能力。

Kafka 如何简化应用集成与现代化

The New Stack
The New Stack · 2025-12-22T16:00:00Z

本周Rust动态包括Ergot库的消息传递能力,Rayon在图算法中的并行处理挑战,Walrus分布式消息流平台的创新架构,Hurl v7.1.0增强的HTTP测试功能,以及Rust标准库文件写入API可能导致的数据丢失问题。

【Rust日报】2025-11-27 walrus:分布式消息流平台,比 Kafka 快

Rust.cc
Rust.cc · 2025-11-27T03:47:06Z

Kafka常见面试题解答

运维派
运维派 · 2025-11-22T17:59:20Z

图解Kafka,看本篇就足够啦!

运维派
运维派 · 2025-11-22T17:58:39Z
Spring for Apache Kafka 4.0.0 正式发布

Spring for Apache Kafka 4.0.0正式发布,感谢所有贡献者。该版本新增特性、修复错误、改进文档,支持Kafka 4.0及共享消费者模式,集成Spring Framework 7.0,优化性能,并与Spring Boot 4.0.0兼容。

Spring for Apache Kafka 4.0.0 正式发布

Spring
Spring · 2025-11-18T00:00:00Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码