二、偏倚‐方差权衡和光滑参数的选择

注意到以上非参数回归模型中都有一个非常重要的光滑参数，如k‐最近邻的k值、核的窗宽、分段多项式节点的个数和惩罚项的乘数λ。光滑参数的大小控制着回归函数的光滑程度，如小的λ产生快速波动的光滑样条拟合，而大的λ则产生近似线性的光滑函数。在非参数回归拟合中，总是力求使估计回归函数的拟合优度和拟合光滑度之间达到最佳兼顾。这样的要求可以通过设定光滑参数的大小来实现，因此光滑参数的选择在非参数回归建模中有着重要意义。故而这里将简单介绍偏倚‐方差权衡（bias‐variance trade‐off）的概念和一些光滑参数 ......