标签

 kafka 

相关的文章:

本列表汇集了关于Kafka的最新文章,涵盖架构设计、安装指南、应用实例及与其他技术的集成,帮助您深入理解Kafka在现代数据处理中的重要性。

发表于:
阅读原文

为DigitalOcean托管Kafka引入Kafka模式注册中心

We’re excited to announce support for Kafka Schema Registry in DigitalOcean’s Managed Kafka service, giving developers a powerful way to manage and validate schemas in their event-driven...

DigitalOcean的Kafka托管服务现已支持Kafka Schema Registry,帮助开发者管理和验证事件驱动应用中的模式,确保消息数据结构一致性,提升数据完整性和开发效率。Schema Registry简化了Kafka与不同系统的集成,支持模式版本控制,降低运行时错误,促进微服务间的通信。

为DigitalOcean托管Kafka引入Kafka模式注册中心
原文英文,约500词,阅读约需2分钟。发表于:
阅读原文

Apache Kafka 4.0在Windows下的安装与使用

在往期文章《Apache Kafka安装与使用》介绍了Apache Kafka 3.4.0快速入门。自从Kafka 4.0发布,相关的安装、配置发生了差异。本文主要介绍pache Kafka 4.0在Windows下的安装与使用。 下载 Kafka 访问 Apache Kafka 官网,选择 Binary Downloads,下载 kafka_2.13-4.0.0.tgz(支持...

本文介绍了在Windows下安装和使用Apache Kafka 4.0的步骤,包括下载kafka_2.13-4.0.0.tgz、安装JDK 17并配置JAVA_HOME、解压后配置日志目录、修改server.properties文件、生成集群ID和配置控制器选举。Kafka 4.0采用KRaft模式,格式化日志目录后启动Kafka,并检查日志输出以确认成功。

原文中文,约1800字,阅读约需5分钟。发表于:
阅读原文

AWS Lambda 原生支持 Avro 和 Protobuf 格式的 Kafka 事件,并实现模式注册中心集成

Lambda now natively supports Apache Avro and Protobuf events, streamlining Kafka event processing - an enhancement that eliminates the need for custom deserialization, automates schema validation...

AWS Lambda现已原生支持Apache Avro和Protocol Buffers格式,简化了与Apache Kafka的集成。此功能支持与多个模式注册中心对接,自动处理事件验证和解码,降低开发复杂性。开发者可通过Kafka开源接口构建函数,优化计算成本,并在ESM层过滤事件。适用于所有AWS Lambda Kafka ESM可用区域。

AWS Lambda 原生支持 Avro 和 Protobuf 格式的 Kafka 事件,并实现模式注册中心集成
原文英文,约600词,阅读约需2分钟。发表于:
阅读原文

LinkedIn宣布Northguard和Xinfra:超越Kafka的日志存储和Pub/Sub扩展

LinkedIn today announced Northguard, a scalable log storage system that replaces Kafka, and Xinfra, a virtualized Pub/Sub layer. Northguard delivers sharded data & metadata, log striping, strong...

LinkedIn推出了Northguard和Xinfra,前者是可扩展的日志存储系统,替代Kafka,后者是虚拟化的Pub/Sub层。Northguard提升了可扩展性和一致性,简化数据管理,提升性能。Xinfra实现了Kafka与Northguard的无缝迁移,LinkedIn已成功迁移数千个主题,处理万亿条记录。

LinkedIn宣布Northguard和Xinfra:超越Kafka的日志存储和Pub/Sub扩展
原文英文,约800词,阅读约需3分钟。发表于:
阅读原文

分析Apache Kafka Stretch集群:WAN中断、故障场景与灾难恢复策略

Proficient in analyzing the dynamics of Apache Kafka Stretch Clusters, I assess WAN disruptions and devise effective Disaster Recovery (DR) strategies. With deep expertise, I ensure high...

在本地环境中设置Apache Kafka Stretch集群存在高风险,可能导致服务不可用,影响恢复时间目标(RTO)和恢复点目标(RPO)。不均匀的数据负载可能导致集群故障,常见的灾难恢复策略也面临挑战。Kafka在各行业广泛应用,企业需关注高可用性和灾难恢复能力,以应对基础设施故障。

分析Apache Kafka Stretch集群:WAN中断、故障场景与灾难恢复策略
原文英文,约6500词,阅读约需24分钟。发表于:
阅读原文

使用 WebSockets、Redis、Kafka 和 PostgreSQL 构建可扩展的聊天应用程序

从 WhatsApp 到多人游戏,实时通信为一切提供了动力。虽然搭建一个 WebSocket 服务器可能感觉像一个周末就能完成的项目,但如何将其扩展到数千个用户而不至于在负载下崩溃...

本文探讨了构建可扩展的实时消息传递系统的方法,利用Redis实现跨服务器通信,使用Kafka进行消息缓冲和持久化,PostgreSQL用于存储历史消息。该系统支持高并发用户,确保消息不丢失并保持高性能。

使用 WebSockets、Redis、Kafka 和 PostgreSQL 构建可扩展的聊天应用程序
原文中文,约2900字,阅读约需7分钟。发表于:
阅读原文

Spring for Apache Kafka 3.3.7 和 3.2.10 现已发布

On behalf of the team and everyone who contributed, we are pleased to announce that Spring for Apache Kafka 3.3.7 and 3.2.10 have been released and are available from Maven Central. We extend our...

Spring for Apache Kafka 3.3.7和3.2.10已发布,感谢贡献者。3.2.10标志着3.2.x版本的生命周期结束,建议升级到3.3.x以获得持续支持。这些版本将集成到即将发布的Spring Boot中。

Spring for Apache Kafka 3.3.7 和 3.2.10 现已发布
原文英文,约200词,阅读约需1分钟。发表于:
阅读原文

Kafka与传统消息总线:为何Kafka在高可扩展系统中胜出

In the world of distributed systems and microservices, choosing the right messaging infrastructure is critical for achieving scalability, reliability, and performance. While traditional message...

在分布式系统和微服务中,选择合适的消息基础设施至关重要。虽然RabbitMQ和ActiveMQ等传统消息总线已流行多年,但Apache Kafka因其高可扩展性和可靠性而脱颖而出。Kafka的分布式事件流平台特性,如分区日志、持久存储和消费者管理偏移量,使其在高负载环境中表现优异。

Kafka与传统消息总线:为何Kafka在高可扩展系统中胜出
原文英文,约300词,阅读约需1分钟。发表于:
阅读原文

Reactor Kafka项目将停止维护

Reactor Kafka Project Will Be Discontinued TL;DR: We’ve decided to discontinue future maintenance of the Reactor Kafka project and deprecate its associated components within the Spring...

Reactor Kafka项目将停止维护,相关组件将被弃用。根据采用情况评估,决定结束该项目的维护和集成。Reactor Kafka 1.3将是最后一个小版本,后续仅提供必要更新。感谢所有贡献者。

Reactor Kafka项目将停止维护
原文英文,约300词,阅读约需1分钟。发表于:
阅读原文