详解R语言实现前向逐步回归(前向选择模型)
更新时间：2021年08月11日 09:57:24 作者：gaomeihong1993
本文主要介绍了详解R语言实现前向逐步回归，从实现原理开始，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
前向逐步回归原理
前向逐步回归的过程是：遍历属性的一列子集，选择使模型效果最好的那一列属性。接着寻找与其组合效果最好的第二列属性，而不是遍历所有的两列子集。以此类推，每次遍历时，子集都包含上一次遍历得到的最优子集。这样，每次遍历都会选择一个新的属性添加到特征集合中，直至特征集合中特征个数不能再增加。
数据导入并分组
导入数据，将数据集抽取70%作为训练集，剩下30%作为测试集。特征与标签分开存放。
导入数据
R语言的实现如下图：
train和test中存储的数据情况如下：
特征与标签分开存放
R语言的实现如下图：
前向逐步回归构建输出特征集合
通过for循环，从属性的一个子集开始进行遍历。第一次遍历时，该子集为空。每一个属性被加入子集后，通过线性回归来拟合模型，并计算在测试集上的误差，每次遍历选择得到误差最小的一列加入输出特征集合中。最终得到输出特征集合的关联索引和属性名称。
从空开始一次创建属性列表
R语言的实现如下图：
模型效果评估
分别画出RMSE与属性个数之间的关系，前向逐步预测算法对数据预测对错误直方图，和真实标签与预测标签散点图。R实现如下：
到此这篇关于详解R语言实现前向逐步回归(前向选择模型)的文章就介绍到这了,更多相关R语言 前向逐步回归内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要介绍了R语言绘制双坐标图,下面就跟大家介绍plotrix包中的twoord.plot()函数和twoord.stackplot()函数，它们可以实现双坐标轴图形的绘制，需要的朋友可以参考下2023-01-01
这篇文章主要为大家介绍了R语言绘制小提琴图violin plot的实现方法示例，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步2022-02-02
在本篇文章里小编给大家整理了一篇关于R语言对CSV文件操作实例讲解内容，有兴趣的朋友们可以学习下。2021-04-04
这篇文章主要介绍了R语言归一化处理实例讲解，文中内容讲解的很清晰，有感兴趣的同学可以学习下2021-03-03
在本篇内容里小编给大家介绍了关于R语言的历史内容，有兴趣学习的朋友可以阅读下。2021-03-03
这篇文章主要介绍了R语言 title()函数的参数用法说明，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2021-04-04
这篇文章主要为大家介绍了R语言绘图技巧如何导出高清图，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2022-02-02
这篇文章主要介绍了R语言绘制坐标 保存图片的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2021-04-04
这篇文章主要介绍了利用R语言绘制时间序列图的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2021-03-03
这篇文章主要介绍了R语言在散点图中添加lm线性回归公式的问题,本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-09-09
最新评论