Mode Collapse 和 Mode Dropping的定义与不同

Mode Collapse 和 Mode Dropping两个都是GAN训练过程中由于散度函数选取不佳而产生的问题。

Mode Collapse 

Mode Collapse 和 Mode Dropping的定义与不同

生成的图片比较集中,从二次元头实验可以看到,好多头像很类似,就是这个问题。

这个问题主要是由于实际的数据分布峰值有多个,而训练只拟合了其中的一个,如下图所示。

Mode Collapse 和 Mode Dropping的定义与不同

 

Mode Dropping

Mode Collapse 和 Mode Dropping的定义与不同

训练了多次以后,生成的图片人脸都是一样的,只有色调的改变。

 

两种问题有可能会同时发生,通常是改变散度函数来解决的。

 

如果有另外的知识请在评论区补充提醒~感谢!