1.对抗攻击概念介绍

Posted tangweijqxx

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了1.对抗攻击概念介绍相关的知识,希望对你有一定的参考价值。

对抗攻击概念

  通过对输入添加微小的扰动使得分类器分类错误,一般对用于深度学习的网络的攻击算法最为常见,应用场景包括目前大热的CV和NLP方向,例如,通过对图片添加精心准备的扰动噪声使得分类器分错,或者通过对一个句子中的某些词进行同义词替换使得情感分类错误。

对抗攻击分类

  关于攻击的分类有很多种,从攻击环境来说,可以分为黑盒攻击,白盒攻击或者灰盒攻击

  •   黑盒攻击:攻击者对攻击的模型的内部结构,训练参数,防御方法(如果加入了防御手段的话)等等一无所知,只能通过输出输出与模型进行交互。
  •   白盒攻击:与黑盒模型相反,攻击者对模型一切都可以掌握。目前大多数攻击算法都是白盒攻击。
  •   灰盒攻击:介于黑盒攻击和白盒攻击之间,仅仅了解模型的一部分。(例如仅仅拿到模型的输出概率,或者只知道模型结构,但不知道参数)
    从攻击的目的来说,可以分为有目标攻击和无目标攻击
  •        无目标攻击:以图片分类为例,攻击者只需要让目标模型对样本分类错误即可,但并不指定分类错成哪一类。
  •     有目标攻击:攻击者指定某一类,使得目标模型不仅对样本分类错误并且需要错成指定的类别。从难度上来说,有目标攻击的实现要难于无目标攻击。

   从扰动的强度大小来说,可以分为有目标攻击和无目标攻击:

  •       无穷范数攻击
  •     二范数攻击
  •     一范数攻击(单像素攻击)

         从攻击的实现来说来说,可以分为基于梯度的攻击,基于优化的攻击,基于决策面的攻击或者其他:

  • 基于梯度的攻击:    FGSM(Fast Gradient Sign Method)  PGD(Project Gradient Descent)  MIM(Momentum Iterative Method)
  • 基于优化的攻击:    CW(Carlini-Wagner Attack)
  • 基于决策面的攻击:  DEEPFOOL
  • 其他:Pointwise

对抗攻击实现工具:

  目前来说,比较主流的工具有cleverhans,foolbox,另外笔者还发现了一个advertorch,专门针对pytorch模型。

  cleverhans foolbox advertorch
针对模型框架 tensorflow/keras/pytorch pytorch/tensorflow pytorch
产生速度 可以批量 无法批量 可以批量
使用复杂度 ♥♥♥♥♥ ♥♥  ♥♥
包含的攻击类别数 ♥♥♥♥♥  ♥♥♥♥♥   ♥♥

(当然这个难易程度是笔者自己分的,见仁见智了~~~)

$$ \rho = \sqrt{(\Delta x)^{2}+(\Delta y)^{2}} \\ \lim\limits_{x \rightarrow x_{0}} f(x) = f(x_{0}) $$

 

以上是关于1.对抗攻击概念介绍的主要内容,如果未能解决你的问题,请参考以下文章

图像对抗算法(先导篇)

漫谈在人工智能时代网络入侵检测器的安全风险——逃逸攻击上篇

对抗攻击基础知识

Keras深度学习实战(19)——使用对抗攻击生成可欺骗神经网络的图像

神经网络中的对抗攻击与对抗样本

图像对抗算法-攻击篇(I-FGSM)