百科问答小站 logo
百科问答小站 font logo



你所在的专业领域,有哪些综述文献推荐给刚入行的朋友看? 第1页

  

user avatar   li-yiming-79-73 网友的相关建议: 
      

那我必推荐我们去年在 后门学习 领域写的survey。感谢大家的支持,目前这也是后门学习领域被引次数最多的综述。

在这篇survey中我们对现有的文章进行了分类和总结,并加入了很多我们的思考。同时,我们也在Github上维护了一个资源汇总的仓库:


后门学习(backdoor learning)是一个重要且正在蓬勃发展的领域。与对抗学习(adversarial learning)类似,后门学习也研究深度学习模型的安全性问题,其研究主要包括两大领域:后门攻击(backdoor attacks)及后门防御(backdoor defenses)。

顾名思义,后门攻击希望在模型的训练过程中通过某种方式在模型中埋藏后门(backdoor),埋藏好的后门通过攻击者预先设定的触发器(trigger)激发。在后门未被激发时,被攻击的模型具有和正常模型类似的表现;而当模型中埋藏的后门被攻击者激活时,模型的输出变为攻击者预先指定的标签(target label)以达到恶意的目的。后门攻击可以发生在训练过程非完全受控的很多场景中,例如使用第三方数据集、使用第三方平台进行训练、直接调用第三方模型,因此对模型的安全性造成了巨大威胁。

目前,对训练数据进行投毒是后门攻击中最直接,最常见的方法。 如下图所示,在基于投毒的后门攻击(poisoning-based attacks)中,攻击者通过预先设置的触发器(例如一个小的local patch)来修改一些训练样本。 这些经过修改的样本的标签讲被攻击者指定的目标标签替换,生成被投毒样本(poisoned samples)。这些被投毒样本与正常样本将会被同时用于训练,以得到带后门的模型。值得一提的是,触发器不一定是可见的,被投毒样品的真实标签也不一定与目标标签不同,这增加了后门攻击的隐蔽性。 当然,目前也有一些不基于投毒的后门攻击方法被提出,也取得了不错的效果。

相对于攻击来说,后门防御的类型要更为丰富与复杂。直观上来说,后门攻击就像是使用对应的钥匙开门,因此后门防御也可以从 触发器-后门不匹配、后门移除、触发器移除 这三种设计范式下进行思考与讨论。 General Idea如下图所示:

尽管存在很多相似之处,后门学习事实上与对抗学习之间仍然存在很大的区别。一般来说,对抗攻击关注的是模型预测过程的安全性问题,而后门攻击关注的是模型训练过程的安全性。此外,后门攻击与传统的数据投毒(data poisoning)[另一个关注模型训练过程安全性的研究领域]也有很大的区别:数据投毒的目的是为了降低模型的泛化性能(即希望训练好的模型在测试集上不能有良好的表现),而后门攻击在正常设定下具有和正常模型类似的表现




  

相关话题

  做基础数学研究的人是怎样的研究模式呢? 
  河南一校长发表熟蛋返生孵雏鸡论文,称利用特异学生意念和能量传播,为什么该论文能发表?暴露了哪些问题? 
  Springer Nature 宣布撤回 64 篇论文是怎么回事?为什么同行评审报告能被伪造? 
  如何看待11月18日曹雪涛团队再发《自然》子刊论文,立即被指出涉嫌数据造假? 
  如何看待目前科研领域严重内卷? 
  如何看在网络爆红的复旦大学教授工资条? 
  在院士手下学习工作是种什么样的体验? 
  院校扩招的原因是什么?扩招是科研发展的必要条件吗? 
  你怎么看待在国内高校推行「非升即走」的预聘-长聘 (tenure-track) 人事制度? 
  如何评价中科院合肥物质科学研究院的改革创举? 

前一个讨论
iQOOneo5 使用体验如何?
下一个讨论
化合物难溶的本质是什么?





© 2024-12-18 - tinynew.org. All Rights Reserved.
© 2024-12-18 - tinynew.org. 保留所有权利