python实现机器学习之元线性回归
更新时间：2018年09月06日 15:59:50 作者：婉如
这篇文章主要为大家详细介绍了python实现机器学习之元线性回归，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
一、理论知识准备
1.确定假设函数
如：y=2x+7
其中，（x，y）是一组数据，设共有m个
2.误差cost
用平方误差代价函数
3.减小误差（用梯度下降）
二、程序实现步骤
1.初始化数据
x、y：样本
learning rate：学习率
循环次数loopNum：梯度下降次数
2.梯度下降
循环（循环loopNum次）：
（1）算偏导（需要一个for循环遍历所有数据）
（2）利用梯度下降数学式子
三、程序代码
import numpy as np
def linearRegression(data_x,data_y,learningRate,loopNum):
w,b=0,0
#梯度下降
for i in range(loopNum):
w_derivative, b_derivative, cost = 0, 0, 0
for j in range(len(data_x)):
wxPlusb=w*data_x[j]+b
w_derivative+=(wxPlusb-data_y[j])*data_x[j]
b_derivative+=wxPlusb-data_y[j]
cost+=(wxPlusb-data_y[j])*(wxPlusb-data_y[j])
w_derivative=w_derivative/len(data_x)
b_derivative=b_derivative/len(data_x)
w = w - learningRate*w_derivative
b = b - learningRate*b_derivative
cost = cost/(2*len(data_x))
if i%100==0:
print(cost)
print(w)
print(b)
if __name__== "__main__": #_x:protected __x:private
x=np.random.normal(0,10,100)
noise=np.random.normal(0,0.05,100)
y=2*x+7+noise
linearRegression(x,y,0.01,5000)
四、输出
1.输出cost
可以看到，一开始的误差是很大的，然后减小了
最后几次输出的cost没有变化，可以将训练的次数减小一点
2.训练完的w和b
和目标w=2，b=7很接近
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
相关文章
这篇文章主要介绍了Python datetime包函数简单介绍,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-08-08
下载python中Crypto库报错：ModuleNotFoundError: No module named ‘Cry
Crypto不是自带的模块，需要下载。下面这篇文章主要给大家介绍了关于下载python中Crypto库报错：ModuleNotFoundError: No module named 'Crypto'的解决方法，文中通过图文介绍的非常详细，需要的朋友可以参考下。2018-04-04
这篇文章主要介绍了Python探针完成调用库的数据提取，Python中可以通过sys.meta_path来实现import hook的功能，下文详细资料介绍，需要的小伙伴可以参考一下2022-05-05
今天小编就为大家分享一篇Python实现按逗号分隔列表的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-10-10
这篇文章主要介绍了使用python向MongoDB插入时间字段的操作，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2021-05-05
python的两个单元测试包分别是 doctest 和 unittest，这两个包的使用起来各有长处，适用于不同的场景，这篇文章主要介绍了Python单元测试的两种写法,需要的朋友可以参考下2022-07-07
零基础写python爬虫之抓取百度贴吧并存储到本地txt文件改进版
前面已经发了一篇关于百度贴吧抓取的代码，今天我们来看下代码的改进版，参考了上篇抓取糗事百科的思路，给需要的小伙伴们参考下吧2014-11-11
今天小编就为大家分享一篇从django的中间件直接返回请求的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-05-05
这篇文章主要介绍了Python创建xml的方法,实例分析了Python操作XML文件的技巧,具有一定参考借鉴价值,需要的朋友可以参考下2015-03-03
使用jupyter Nodebook查看函数或方法的参数以及使用情况
这篇文章主要介绍了使用jupyter Nodebook查看函数或方法的参数以及使用情况，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-04-04
最新评论