小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
沉浸式翻译 immersive translate

本文探讨存储系统中的静默数据损坏问题,分析其成因与危害,并重点介绍校验和算法(CRC32C、xxHash、SHA-256等)的原理、性能对比及选型考量。文章强调端到端校验原则,通过ZFS、Btrfs等文件系统的实现案例,说明如何构建完整的数据完整性保护机制,并提供了巡检、修复等实战策略。

【存储工程】校验和与数据完整性

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2025-09-21T00:00:00Z

数据丢失主要表现为静默数据损坏,即数据在未被察觉的情况下发生变化。文章分析了数据持久化的语义、fsync()的使用、写缓存的风险及其对数据完整性的影响。强调在应用层、文件系统和存储设备等多个层次实施校验和策略,以确保数据的完整性和安全性。建议采取RAID、UPS和定期扫描等措施防止数据损坏。

【存储工程】数据完整性:从 fsync 到端到端校验

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2025-08-21T00:00:00Z
云端数据损坏管理

静默数据损坏是软件行业中的一种罕见但严重的问题,MongoDB Atlas通过先进的监测和修复技术,主动识别和修复数据损坏,确保客户数据安全。该系统利用校验和、索引和复制等方法,降低数据损坏风险。

云端数据损坏管理

MongoDB MongoDB · 2024-12-09T16:00:34Z
参数脆弱性因子(PVF):一种用于理解人工智能系统在模型参数中对静默数据损坏(SDCs)脆弱性的创新指标

本文介绍了一种新指标——参数脆弱性因子(PVF),用于衡量人工智能系统对静默数据损坏(SDCs)的脆弱性。PVF适用于不同的AI模型和硬件故障,能够帮助识别和减轻SDCs的影响。研究表明,SDCs可能导致模型输出错误,影响AI服务的可靠性。通过PVF,设计者可以优化硬件分配,提高系统的容错能力。

参数脆弱性因子(PVF):一种用于理解人工智能系统在模型参数中对静默数据损坏(SDCs)脆弱性的创新指标

Engineering at Meta Engineering at Meta · 2024-06-19T16:00:46Z

该文介绍了一种高效的运行时监控方法,能够从少量隐藏层中提取选择性知识,并检测静默数据损坏。该方法通过 quantile markers 在受影响的网络层中准确估计异常情况,实现对正常和异常行为的分类。该技术精确度高达96%,召回率高达98%,计算开销小,有助于模型可解释性。

一种低成本的策略性监控方法,用于深度神经网络中的可扩展和可解释的错误检测

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2023-10-31T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码