小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
沉浸式翻译 immersive translate
Dify.AI

本研究提出了一种新颖的联邦学习算法FedCGS,旨在解决传统联邦学习中的高通信成本和隐私攻击风险。该算法通过预训练模型捕获全局特征统计,实现了一次性联邦学习,表现出色,具有广泛应用潜力。

Capture Global Feature Statistics for One-Shot Federated Learning

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-03-10T00:00:00Z

对抗训练提高模型韧性但成本高,随机平滑和形式验证有局限。投毒攻击影响性能,需要数据清洗和鲁棒性训练。隐私攻击威胁用户隐私,差分隐私提供保护但影响准确性。模型提取攻击需防范,设计安全AI系统仍需努力。

对抗式机器学习攻击与缓解措施分类及术语(上)

绿盟科技技术博客 绿盟科技技术博客 · 2024-10-14T10:14:06Z

本文介绍了“PINCH”框架在异构硬件平台提取攻击中的应用,评估了21种模型架构的攻击特征。研究表明,Prompt Injection攻击对大型语言模型(LLMs)有效,Model Leeching能够有效提取任务知识。通过构建数据集,探讨了注入攻击的防御方法,并提出了黑盒和白盒防御策略,强调了开源模型的隐私攻击风险。

PII-Scope:一个评估大型语言模型训练数据个人信息泄漏的基准

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-10-09T00:00:00Z

研究表明,大型语言模型在安全与隐私领域的错误率为21.3%,多次查询时增至32.6%。提出隐私保护语言模型(PPLM)以保护数据隐私,并通过微调增强模型知识。论文分析了隐私攻击及防御策略,强调了大型语言模型在隐私保护中的潜力,并指出未来研究方向。

大型语言模型的隐私意识如何?合规性与隐私技术评估案例研究

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-09-04T00:00:00Z

本研究分析了图神经网络的隐私攻击风险,提出了三种攻击方法和两种防御机制。同时,探讨了基于流的图结构在入侵检测中的应用,提出了轻量级知识图谱架构,并验证了其在数据分析中的有效性。实验结果显示新方法在性能和模型大小上具有优势。

利用本地图推理进行恶意互联网实体检测

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-08-06T00:00:00Z

本文研究了扩散模型的成员隐私攻击风险,提出了黑盒攻击方法SecMI,评估了稳定扩散模型的隐私漏洞。实验结果显示攻击成功率达到60%。研究强调了加强防御措施的必要性,并探讨了数据集特性与攻击脆弱性的关系,为未来研究提供了参考。

揭示结构记忆:用于文本到图像转换模型的结构成员推断攻击

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-07-18T00:00:00Z

本文探讨了深度学习中损失曲率与模型性能的关系,分析了焦损失函数对训练动态的影响,并提出通过曲率测量神经网络的记忆化能力。研究表明,避免高曲率区域可提高学习稳定性,并提出新方法增强对隐私攻击的防御能力。

曲率线索:用输入失真曲率解码深度学习隐私

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-07-03T00:00:00Z

本文提出了多种高效的微调方法,如Spectral DeTuning和LoRA-XS,旨在优化大型语言模型的训练性能和参数效率。研究表明,LoRA在某些任务中优于全精调,同时保持模型的正则化效果。此外,文章探讨了处理敏感数据时的隐私攻击风险,并通过实验验证了新方法在常识推理和数学推理任务中的优越性。

从 LoRA 权重中恢复数据集大小

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-06-27T00:00:00Z

本文评估了基于转导学习的防御机制,提出了攻击模型空间的原则和新攻击框架Greedy Model Space Attack。研究表明,重新训练模型能显著提高对抗攻击的鲁棒性,并针对图神经网络的隐私攻击提出了有效的防御方法,降低攻击者推理准确率60%。

图传导防御:一种用于图成员推断攻击的两阶段防御

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-06-12T00:00:00Z

本文综述了机器学习与隐私问题,探讨了私有机器学习、隐私保护及隐私攻击的研究进展与挑战,并提出未来研究方向。同时,强调了人工智能对经济、社会和伦理的影响,呼吁各方合作,促进公众对人工智能的理解与参与。

机器学习对社会的影响:当前趋势和未来影响的分析

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-04-16T00:00:00Z

该文综述机器学习隐私保护研究,涵盖成员推理、模型反演、属性推断和模型窃取等攻击,以及干扰攻击、数据扰动、差分隐私、MemGuard噪声、互信息正则化和统计推断框架等防御方法,这些方法可在保持模型精度的同时降低隐私泄露,提升联邦学习等系统的安全性。

Inf2Guard: 一个信息理论框架用于学习抵抗判断攻击的隐私保护表示

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-03-04T00:00:00Z

本文综述机器学习与隐私的交叉研究,涵盖私有机器学习、机器学习辅助隐私保护及隐私攻击与防御三类交互,总结各领域进展与挑战,并提出未来方向,包括差分隐私下训练深度神经网络、数据发布框架3A、自动驾驶数据隐私风险分层等。

基于人工智能的匿名化:在利用机器学习时保护个人数据隐私

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-02-27T00:00:00Z

该文综述深度学习模型的隐私攻击,涵盖模型反演、模型抽取与对抗攻击,重点介绍基于GAN的模型反演、GraphMI图神经网络攻击、动态记忆模型逆向攻击等方法,这些方法可提升攻击成功率并提取私有训练数据,同时探讨差分隐私等防御手段的局限。

DNN 隐私泄露:模型倒置攻击和防御方法的调查

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-02-06T00:00:00Z

该文综述多项研究,探讨用机器学习估计信息泄漏与互信息,涵盖黑盒g-vulnerability评估、密码系统互信息、隐私-效用权衡、模型反演防御、贝叶斯风险、L-Leaks成员推断攻击、互信息分类器及差分隐私成员推断,并验证泛化界限。

通过近似贝叶斯最优预测进行信息泄露检测

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-25T00:00:00Z

该文综述联邦学习中的隐私攻击研究:TGIAs-RO利用多重时间梯度提升梯度反演重构;CGI可从聚合全局模型恢复训练样本并规避鲁棒聚合;研究评估防御机制,发现组合防御更有效;预训练生成模型可泄露隐私;PI-SBA实现隐蔽后门攻击;Patch-MI与Plug & Play改进模型反演;基于GAN的方法提升攻击成功率,并提出隐私保护图像分布共享方案。

GI-PIP:梯度反转攻击是否需要不实用的辅助数据集?

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-22T00:00:00Z

本文综述大语言模型的安全与评估研究:提出基于提示的攻击风险分类,梳理十类脆弱性及缓解措施;综述隐私攻击与防护;通过大规模查询揭示稳健性、一致性和可信度问题;提出知识能力、对齐与安全三方面评估框架;分析法律、医学等高风险领域的事实准确性与安全性局限;并讨论社会偏见评估、知识融入及电力系统应用中的潜在威胁。

大型语言模型系统的风险分类、缓解和评估基准

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-11T00:00:00Z

该文汇总多项图神经网络研究:GraphRetrieval通过检索训练图增强GNN并去噪;IGNN用隐式微分捕捉长程依赖;逻辑程序模拟GNN信息传播以预测节点属性;分析GNN隐私攻击并提出防御;GNN作为推送算法优于置信传播;提出理论框架分析GNN表达能力;在线传播与节点自适应方法加速大规模图推断;黑盒属性推理攻击的隐私风险有限;GNNExplainer识别关键子图与特征以提供可解释预测。

推断图神经网络的属性

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-08T00:00:00Z

本文研究了隐私保护深度学习机制对各种隐私攻击的能力,并提出了解决带噪声线性方程组的新方法。通过SPN技术解决了现有PPDL方法面临的隐私攻击挑战。实验表明,在数据隐私得到保护的情况下,模型准确性平均提高了5-20%。

基于预测的数据安全 DLP 方法

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2023-12-21T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码