卷积层的可视化理解

1.什么是“风格”
要计算风格损失函数,我们首先需要知道“风格(Style)”是什么。
我们使用L
层的**来度量“Style”,将“Style”定义为通道间**值之间的相关系数。(Define style as correlation between activation across channels)
卷积层的可视化理解
那么我们如何计算这个所谓的相关系数呢?
下图是我们从上图中所标识的第l层,为方便说明,假设只有5层通道

卷积层的可视化理解
如上图示,红色通道和黄色通道对应位置都有**项,而我们要求的便是它们之间的相关系数
但是为什么这么求出来是有效的呢?为什么它们能够反映出风格呢?






2.图像风格的直观理解
如图风格图像有5层通道,且该图像的可视化特征如左下角图所示。
其中红色通道可视化特征如图中箭头所指是垂直条纹,而黄色通道的特征则是橘色背景。
那么通过计算这两层通道的相关系数有什么用呢?
其实很好理解,如果二者相关系数性强,那么如果出现橘色背景,那么就应该很大概率出现垂直条纹。反之,亦然。
利用反pool,反卷积 去可视化特征
卷积层的可视化理解
3.风格相关系数矩阵
卷积层的可视化理解

卷积层的可视化理解