小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ

本文讨论了Flink中EmbeddedRocksDBStateBackend的机制,重点在于KeyGroup前缀、增量checkpoint的实现及其与RocksDB的关系。增量checkpoint依赖于不可变SST文件和MANIFEST,以确保数据一致性。文章还比较了Flink、TiKV和Kafka Streams在状态管理和容错机制上的差异,强调了设计与参数调优的重要性。

【RocksDB 内核机制】生产嵌入对照:Flink · TiKV · Kafka Streams

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-07-07T00:00:00Z

本文探讨流式数据处理的核心概念,包括流处理、批处理和微批的区别,以及如何通过Kafka和Flink实现有状态计算。强调流处理在无界输入和乱序情况下的容错机制,比较流表对偶与Lambda/Kappa架构,指出流处理的关键在于定义输出时机、状态存储和容错策略。

【流式数据处理】流处理全景:从日志到有状态计算

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-07-01T00:00:00Z
Agent提示工程与聊天提示词不同:是系统架构的设计

在智能体时代,提示词工程应被视为分布式系统设计,而非简单对话。有效的提示词应包含明确的计划、故障处理和自我审查机制,以减少智能体在执行复杂任务时的错误。将提示词视为操作手册,设计容错系统架构,避免智能体出现“权力漂移”,确保其遵循规定的流程和边界。

Agent提示工程与聊天提示词不同:是系统架构的设计

极道 极道 · 2026-06-22T11:46:00Z
大型平台如何处理每日数百万笔交易

本文探讨了大型平台如何处理海量交易及其面临的工程挑战和架构模式。随着用户增长,系统需快速、准确地处理交易,避免瓶颈和重复交易。通过服务化架构、负载均衡、数据库复制、缓存和异步处理等方法,平台能够提高性能和可靠性。此外,监控系统健康、应对流量高峰和设计容错机制也至关重要。成功的平台能在用户激增时保持快速、准确的交易处理。

大型平台如何处理每日数百万笔交易

freeCodeCamp.org freeCodeCamp.org · 2026-06-13T06:50:15Z
构建可扩展的数据管道:现代数据工程师的最佳实践

构建可扩展的数据管道对于有效处理不断增长的数据流至关重要。通过容错机制、模块化结构、自动化流程和云端扩展,企业能够应对数据激增,保持竞争力。同时,良好的文档记录有助于未来的维护和升级。

构建可扩展的数据管道:现代数据工程师的最佳实践

DEV Community DEV Community · 2024-11-08T09:26:17Z

本文提出了一种零空间成本的容错机制,通过可微结构修剪、权重复制和投票以及嵌入最显著位(MSBs)到模型权重中,有效减少了硬件故障对模型预测的影响,并在 GLUE 基准的九个任务上使用 BERT 模型进行实验验证了该方法的有效性。

基于 ReRAM 的 Transformer 语言模型的零空间成本容错技术

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-22T00:00:00Z
DolphinScheduler笔记之9: 容错

介绍了分布式调度系统 DolphinScheduler 的容错机制,采用 Master-Worker 的设计,通过 ZooKeeper 实现容错处理,但是 failover 需要重启任务。

DolphinScheduler笔记之9: 容错

Ying’s Blog Ying’s Blog · 2023-10-22T08:39:46Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码