python实现机器学习之元线性回归
更新时间：2018年09月06日 15:59:50 作者：婉如
这篇文章主要为大家详细介绍了python实现机器学习之元线性回归，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
一、理论知识准备
1.确定假设函数
如：y=2x+7
其中，（x，y）是一组数据，设共有m个
2.误差cost
用平方误差代价函数
3.减小误差（用梯度下降）
二、程序实现步骤
1.初始化数据
x、y：样本
learning rate：学习率
循环次数loopNum：梯度下降次数
2.梯度下降
循环（循环loopNum次）：
（1）算偏导（需要一个for循环遍历所有数据）
（2）利用梯度下降数学式子
三、程序代码
import numpy as np
def linearRegression(data_x,data_y,learningRate,loopNum):
w,b=0,0
#梯度下降
for i in range(loopNum):
w_derivative, b_derivative, cost = 0, 0, 0
for j in range(len(data_x)):
wxPlusb=w*data_x[j]+b
w_derivative+=(wxPlusb-data_y[j])*data_x[j]
b_derivative+=wxPlusb-data_y[j]
cost+=(wxPlusb-data_y[j])*(wxPlusb-data_y[j])
w_derivative=w_derivative/len(data_x)
b_derivative=b_derivative/len(data_x)
w = w - learningRate*w_derivative
b = b - learningRate*b_derivative
cost = cost/(2*len(data_x))
if i%100==0:
print(cost)
print(w)
print(b)
if __name__== "__main__": #_x:protected __x:private
x=np.random.normal(0,10,100)
noise=np.random.normal(0,0.05,100)
y=2*x+7+noise
linearRegression(x,y,0.01,5000)
四、输出
1.输出cost
可以看到，一开始的误差是很大的，然后减小了
最后几次输出的cost没有变化，可以将训练的次数减小一点
2.训练完的w和b
和目标w=2，b=7很接近
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
相关文章
这篇文章主要介绍了Python如何批量获取文件夹的大小并保存,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-03-03
这篇文章主要介绍了Python如何绘制组合图，帮助大家更好的利用python绘制图像，进行数据可视化分析，感兴趣的朋友可以了解下2020-09-09
作者分享了在业务场景中如何优化接口查询的实践经验,主要面临的问题是需要随机获取上游查询接口的结果,提出了两种方案,方案一是反复查询并随机获取查询结果；方案二是查询一次,然后随机从查询结果中获取,通过实测比较,方案二的性能提升较大2024-10-10
这篇文章主要给大家介绍了关于Python通过命令开启http.server服务器的方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们随着小编来一起学习学习吧。2017-11-11
今天小编就为大家分享一篇python通过对字典的排序,对json字段进行排序的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-02-02
Python之数据序列化（json、pickle、shelve）详解
这篇文章主要介绍了Python之数据序列化（json、pickle、shelve）详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-08-08
这篇文章主要介绍了Python中自定义函方法与参数具有默认值的函数，在Python编程中，可以使用已经定义好的函数，也可以自定义函数实现某些特殊的功能，更多相关资料，请需要的人参考下面文章内容2022-02-02
这篇文章主要介绍了Python正则表达中re模块的使用，文章围绕主题展开详细的内容介绍，具有一定的参考价值，需要的朋友可以参考一下2022-09-09
在疫情阶段，想找一份不错的工作变得更为困难，很多人会选择去网上看招聘信息。可是招聘信息有一些是错综复杂的。本文将为大家介绍用Python爬虫获取招聘信息的方法，需要的可以参考一下2022-03-03
这篇文章主要介绍了Python二叉树的定义及常用遍历算法,结合实例形式分析了基于Python的二叉树定义与先序、中序、后序、层序等遍历方法,需要的朋友可以参考下2017-11-11
最新评论