12 Nonlinear Transformation

Published: 24 Sep 2018 Category: ml-foundations

简要介绍非线性变换,见详细课件

当非线性关系存在时,可能要考虑non-linear transformation,比如quadratic hypothesis set。主要考虑计算代价和泛化代价。

Quadratic Hypothesis Set

常见的一种非线性变换。

ml-foundations-quadratic-hypothesis-set

非线性变换,不仅要考虑计算代价,还要考虑泛化问题。当提取窥探数据的时候,可能会脑补地人为选择很多模型,要警惕。

ml-foundations-danger-of-visual-choices

Best Practice

复杂模型不一定好,不仅要考虑样本内误差,还要考虑泛化误差。总之,先尝试简单模型,问题不大。

ml-foundations-structured-hypothesis-sets

ml-foundations-linear-model-first