机器学习算法中的过拟合与欠拟合


在机器学习表现不佳的原因要么是过度拟合或欠拟合数据。

机器学习中的逼近目标函数过程

监督式机器学习通常理解为逼近一个目标函数(f)(f),此函数映射输入变量(X)到输出变量(Y).

Y=f(X)Y=f(X)

这种特性描述可以用于定义分类和预测问题和机器学习算法的领域。

从训练数据中学习目标函数的过程中,我们必须考虑的问题是模型在预测新数据时的泛化性能。泛化好坏是很重要的,因为我们收集到的数据只是样本,其带有噪音并且是不完全的。

维基百科上的泛化
维基百科上过拟合
维基百科上的归纳推理
维基百科上的感应问题
Quora上的过拟合的直观解释

Overfitting and Underfitting With Machine Learning Algorithms