首页 › 答案 › 题库 › 知到智慧树 › 未分类

以下属于带有正则化的回归算法的是()。

以下属于带有正则化的回归算法的是()。
A、Lasso回归
B、Ridge回归(岭回归)
C、最小二乘回归
D、Elastic-Net回归(弹性网回归)
正确答案:ABD
答案解析:
选项A:Lasso回归(LeastAbsoluteShrinkageandSelectionOperator)即最小绝对收缩和选择算子回归。它通过在回归系数的绝对值之和上添加一个惩罚项来实现正则化。这个惩罚项会使得一些回归系数变为0,从而达到特征选择的目的,即自动筛选出对目标变量有显著影响的特征,同时防止模型过拟合,所以Lasso回归属于带有正则化的回归算法,A选项正确。
选项B:Ridge回归(岭回归)在普通最小二乘回归的基础上,给回归系数添加了\(L_2\)范数作为惩罚项。这个惩罚项会对回归系数进行约束,使其不至于过大,从而防止模型过拟合。\(L_2\)正则化使得系数更趋于稳定,避免出现极端值,所以Ridge回归是带有正则化的回归算法,B选项正确。
选项C:最小二乘回归的目标是找到一组回归系数,使得预测值与真实值之间的误差平方和最小。它没有直接引入正则化项,容易出现过拟合问题,特别是在自变量之间存在多重共线性时,模型可能不稳定,所以最小二乘回归不属于带有正则化的回归算法,C选项错误。
选项D:Elastic-Net回归(弹性网回归)结合了Lasso回归和Ridge回归的特点,同时使用\(L_1\)范数和\(L_2\)范数作为惩罚项。这种组合既可以实现特征选择(类似于Lasso回归),又能对回归系数进行收缩(类似于Ridge回归),从而有效地避免过拟合,属于带有正则化的回归算法,D选项正确。