Pytorch保存模型用于测试和用于继续训练的区别详解

更新时间：2020年01月10日 16:27:24 作者：鱼丸粗面233

今天小编就为大家分享一篇Pytorch保存模型用于测试和用于继续训练的区别详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧

保存模型

保存模型仅仅是为了测试的时候，只需要

torch.save(model.state_dict, path)

path 为保存的路径

但是有时候模型及数据太多,难以一次性训练完的时候,而且用的还是 Adam优化器的时候, 一定要保存好训练的优化器参数以及epoch

state = { 'model': model.state_dict(), 'optimizer':optimizer.state_dict(), 'epoch': epoch }  
torch.save(state, path)

因为这里

def adjust_learning_rate(optimizer, epoch):
  lr_t = lr
  lr_t = lr_t * (0.3 ** (epoch // 2))
  for param_group in optimizer.param_groups:
    param_group['lr'] = lr_t

学习率是根据epoch变化的, 如果不保存epoch的话,基本上每次都从epoch为0开始训练,这样学习率就相当于不变了!!

恢复模型

恢复模型只用于测试的时候,

model.load_state_dict(torch.load(path))

path为之前存储模型时的路径

但是如果是用于继续训练的话,

checkpoint = torch.load(path)
model.load_state_dict(checkpoint['model'])
optimizer.load_state_dict(checkpoint['optimizer'])
start_epoch = checkpoint['epoch']+1

依次恢复出模型优化器参数以及epoch

以上这篇Pytorch保存模型用于测试和用于继续训练的区别详解就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。

您可能感兴趣的文章:

如何一分钟内找出pandas DataFrame某列中的nan值
这篇文章主要介绍了如何一分钟内找出pandas DataFrame某列中的nan值问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
2023-09-09
python glom模块的使用简介
这篇文章主要介绍了python glom模块的使用简介，帮助大家更好的利用python处理数据，感兴趣的朋友可以了解下
2021-04-04
Python中装饰器高级用法详解
这篇文章主要介绍了Python中的装饰器的高级用法,以实例形式详细的分析了Python中的装饰器的使用技巧及相关注意事项
2017-12-12
Python操作xlwings的实例详解
python操作Excel的模块，网上提到的模块大致有：xlwings、xlrd、xlwt、openpyxl、pyxll等。本文将通过几个实例演示下xlwings的使用，感兴趣的可以了解一下
2022-07-07
详解python数组中的符号...与:符号的不同之处
这篇文章主要介绍了详解python数组中的符号...与:符号的不同之处，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2021-03-03
Python编程基础之类和对象
这篇文章主要为大家详细介绍了Python的类和对象，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下，希望能够给你带来帮助
2022-01-01
Python处理PDF与CDF实例
今天小编就为大家分享一篇Python处理PDF与CDF实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2020-02-02
使用Python的Django框架结合jQuery实现AJAX购物车页面
这篇文章主要介绍了使用Python的Django框架结合jQuery实现AJAX购物车页面的方法,示例基于Django中构建好的JSON格式的RESTful API需要的朋友可以参考下
2016-04-04
Python八皇后问题解答过程详解
这篇文章主要介绍了Python讲解八皇后问题过程详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
2019-07-07
如何使用python的subprocess执行命令、交互、等待、是否结束及解析JSON结果
这篇文章主要给大家介绍了关于如何使用python的subprocess执行命令、交互、等待、是否结束及解析JSON结果的相关资料,subprocess模块提供了一种简单的方法来创建和管理子进程,它可以让我们在Python程序中执行外部命令,获取命令的输出和错误信息,需要的朋友可以参考下
2023-12-12