本研究提出了一种新颖的联邦学习算法FedCGS,旨在解决传统联邦学习中的高通信成本和隐私攻击风险。该算法通过预训练模型捕获全局特征统计,实现了一次性联邦学习,表现出色,具有广泛应用潜力。
对抗训练提高模型韧性但成本高,随机平滑和形式验证有局限。投毒攻击影响性能,需要数据清洗和鲁棒性训练。隐私攻击威胁用户隐私,差分隐私提供保护但影响准确性。模型提取攻击需防范,设计安全AI系统仍需努力。
本文介绍了“PINCH”框架在异构硬件平台提取攻击中的应用,评估了21种模型架构的攻击特征。研究表明,Prompt Injection攻击对大型语言模型(LLMs)有效,Model Leeching能够有效提取任务知识。通过构建数据集,探讨了注入攻击的防御方法,并提出了黑盒和白盒防御策略,强调了开源模型的隐私攻击风险。
研究表明,大型语言模型在安全与隐私领域的错误率为21.3%,多次查询时增至32.6%。提出隐私保护语言模型(PPLM)以保护数据隐私,并通过微调增强模型知识。论文分析了隐私攻击及防御策略,强调了大型语言模型在隐私保护中的潜力,并指出未来研究方向。
本研究分析了图神经网络的隐私攻击风险,提出了三种攻击方法和两种防御机制。同时,探讨了基于流的图结构在入侵检测中的应用,提出了轻量级知识图谱架构,并验证了其在数据分析中的有效性。实验结果显示新方法在性能和模型大小上具有优势。
本文研究了扩散模型的成员隐私攻击风险,提出了黑盒攻击方法SecMI,评估了稳定扩散模型的隐私漏洞。实验结果显示攻击成功率达到60%。研究强调了加强防御措施的必要性,并探讨了数据集特性与攻击脆弱性的关系,为未来研究提供了参考。
本文探讨了深度学习中损失曲率与模型性能的关系,分析了焦损失函数对训练动态的影响,并提出通过曲率测量神经网络的记忆化能力。研究表明,避免高曲率区域可提高学习稳定性,并提出新方法增强对隐私攻击的防御能力。
本文提出了多种高效的微调方法,如Spectral DeTuning和LoRA-XS,旨在优化大型语言模型的训练性能和参数效率。研究表明,LoRA在某些任务中优于全精调,同时保持模型的正则化效果。此外,文章探讨了处理敏感数据时的隐私攻击风险,并通过实验验证了新方法在常识推理和数学推理任务中的优越性。
本文评估了基于转导学习的防御机制,提出了攻击模型空间的原则和新攻击框架Greedy Model Space Attack。研究表明,重新训练模型能显著提高对抗攻击的鲁棒性,并针对图神经网络的隐私攻击提出了有效的防御方法,降低攻击者推理准确率60%。
本文综述了机器学习与隐私问题,探讨了私有机器学习、隐私保护及隐私攻击的研究进展与挑战,并提出未来研究方向。同时,强调了人工智能对经济、社会和伦理的影响,呼吁各方合作,促进公众对人工智能的理解与参与。
该文综述机器学习隐私保护研究,涵盖成员推理、模型反演、属性推断和模型窃取等攻击,以及干扰攻击、数据扰动、差分隐私、MemGuard噪声、互信息正则化和统计推断框架等防御方法,这些方法可在保持模型精度的同时降低隐私泄露,提升联邦学习等系统的安全性。
本文综述机器学习与隐私的交叉研究,涵盖私有机器学习、机器学习辅助隐私保护及隐私攻击与防御三类交互,总结各领域进展与挑战,并提出未来方向,包括差分隐私下训练深度神经网络、数据发布框架3A、自动驾驶数据隐私风险分层等。
该文综述深度学习模型的隐私攻击,涵盖模型反演、模型抽取与对抗攻击,重点介绍基于GAN的模型反演、GraphMI图神经网络攻击、动态记忆模型逆向攻击等方法,这些方法可提升攻击成功率并提取私有训练数据,同时探讨差分隐私等防御手段的局限。
该文综述多项研究,探讨用机器学习估计信息泄漏与互信息,涵盖黑盒g-vulnerability评估、密码系统互信息、隐私-效用权衡、模型反演防御、贝叶斯风险、L-Leaks成员推断攻击、互信息分类器及差分隐私成员推断,并验证泛化界限。
该文综述联邦学习中的隐私攻击研究:TGIAs-RO利用多重时间梯度提升梯度反演重构;CGI可从聚合全局模型恢复训练样本并规避鲁棒聚合;研究评估防御机制,发现组合防御更有效;预训练生成模型可泄露隐私;PI-SBA实现隐蔽后门攻击;Patch-MI与Plug & Play改进模型反演;基于GAN的方法提升攻击成功率,并提出隐私保护图像分布共享方案。
本文综述大语言模型的安全与评估研究:提出基于提示的攻击风险分类,梳理十类脆弱性及缓解措施;综述隐私攻击与防护;通过大规模查询揭示稳健性、一致性和可信度问题;提出知识能力、对齐与安全三方面评估框架;分析法律、医学等高风险领域的事实准确性与安全性局限;并讨论社会偏见评估、知识融入及电力系统应用中的潜在威胁。
该文汇总多项图神经网络研究:GraphRetrieval通过检索训练图增强GNN并去噪;IGNN用隐式微分捕捉长程依赖;逻辑程序模拟GNN信息传播以预测节点属性;分析GNN隐私攻击并提出防御;GNN作为推送算法优于置信传播;提出理论框架分析GNN表达能力;在线传播与节点自适应方法加速大规模图推断;黑盒属性推理攻击的隐私风险有限;GNNExplainer识别关键子图与特征以提供可解释预测。
本文研究了隐私保护深度学习机制对各种隐私攻击的能力,并提出了解决带噪声线性方程组的新方法。通过SPN技术解决了现有PPDL方法面临的隐私攻击挑战。实验表明,在数据隐私得到保护的情况下,模型准确性平均提高了5-20%。
完成下面两步后,将自动完成登录并继续当前操作。