机器学习笔记(9)过拟合详解
由上图可知过拟合在以下条件下容易发生:
1. 资料太少
2. 随机噪声或确定噪声太多
3. 算法过于强大
由上图知确定性噪声是由于目标函数太复杂,训练的h不足以实现这个f,
相当于新手上路。
为什么,怎么做。方法大致说下吧:
1. 从简单模型开始
2. 数据清洗,修剪
3. 数据提示(人工合成)
4. 规范化
5. 验证
由上图可知过拟合在以下条件下容易发生:
1. 资料太少
2. 随机噪声或确定噪声太多
3. 算法过于强大
由上图知确定性噪声是由于目标函数太复杂,训练的h不足以实现这个f,
相当于新手上路。
为什么,怎么做。方法大致说下吧:
1. 从简单模型开始
2. 数据清洗,修剪
3. 数据提示(人工合成)
4. 规范化
5. 验证