视觉显著性简介 Saliency Detection

Posted 2021-01-20 wmr95

1.简介

视觉显著性包括从下而上和从上往下两种机制。从下而上也可以认为是数据驱动，即图像本身对人的吸引，从上而下则是在人意识控制下对图像进行注意。科研主要做的是从下而上的视觉显著性，而从上而下的视觉显著性由于对人的大脑结构作用了解还很肤浅，无法深刻的揭示作用原理所以做研究的人也相对较少。

2. 方法

显著性检测一般分为空域和频域。

空域的方法比如：特征提取类似ltti的做法；使用图论知识，显著图建立引入了马尔科夫链；分层提取，并训练SVM用作检测；分析上下文，并模拟返回抑制；分局部，区域，全局，做多尺度对比，中心周边直方图；在条件随机场框架下对特征融合；使用RGB和Lab色彩空间互补通过稀疏编码分析；通过竞争互补方式对多特征分析；随机森林回归学习映射到显著度；背景多为先验，对背景分析，在贝叶斯框架下融合；DeepFix和Deep Gaze等深度学习算法。

频域方法由于难找到原理信息所以研究不多：将图像转换到[0，2pi]线性子空间坐标，对呈现线性的特征值分析提取；利用谱残差，将图像分为显著性信息和冗余信息，图像幅度上对数运算，用平均滤波和幅度谱卷积得到冗余信息，相减得到显著信息；四元相位谱方法。

3. 论文概括