Pytorch保存模型用于测试和用于继续训练的区别详解

作者:鱼丸粗面233 时间:2021-12-02 08:49:39 

保存模型

保存模型仅仅是为了测试的时候,只需要


torch.save(model.state_dict, path)

path 为保存的路径

但是有时候模型及数据太多,难以一次性训练完的时候,而且用的还是 Adam优化器的时候, 一定要保存好训练的优化器参数以及epoch


state = { 'model': model.state_dict(), 'optimizer':optimizer.state_dict(), 'epoch': epoch }  
torch.save(state, path)

因为这里


def adjust_learning_rate(optimizer, epoch):
 lr_t = lr
 lr_t = lr_t * (0.3 ** (epoch // 2))
 for param_group in optimizer.param_groups:
   param_group['lr'] = lr_t

学习率是根据epoch变化的, 如果不保存epoch的话,基本上每次都从epoch为0开始训练,这样学习率就相当于不变了!!

恢复模型

恢复模型只用于测试的时候,


model.load_state_dict(torch.load(path))

path为之前存储模型时的路径

但是如果是用于继续训练的话,


checkpoint = torch.load(path)
model.load_state_dict(checkpoint['model'])
optimizer.load_state_dict(checkpoint['optimizer'])
start_epoch = checkpoint['epoch']+1

依次恢复出模型 优化器参数以及epoch

来源:https://blog.csdn.net/weixin_43122521/article/details/88896996

标签:Pytorch,保存,模型
0
投稿

猜你喜欢

  • Python实现将不规范的英文名字首字母大写

    2021-05-21 08:40:46
  • 对django xadmin自定义菜单的实例详解

    2023-06-19 22:48:21
  • PHP中isset()和unset()函数的用法小结

    2023-11-19 14:19:24
  • Python Pygame实战之水果忍者游戏的实现

    2021-07-25 03:22:37
  • Python处理中文标点符号大集合

    2021-12-07 16:03:45
  • 微信小程序可滑动月日历组件使用详解

    2024-04-16 10:32:22
  • 关于Javascript的内存泄漏问题

    2008-04-15 07:46:00
  • Python 爬虫学习笔记之正则表达式

    2021-07-02 01:50:55
  • 一文学会VSCode使用python

    2022-07-26 16:06:46
  • vue实现菜单切换功能

    2024-05-03 15:12:08
  • 写给应聘页面重构的同学

    2009-03-18 11:01:00
  • Python的logging模块基本用法

    2021-01-06 07:39:52
  • SQL实现数据过滤流程详解

    2024-01-13 02:52:48
  • 什么是Ajax及Ajax的优势

    2007-09-07 09:56:00
  • C#操作SQLite数据库之读写数据库的方法

    2024-01-27 21:46:33
  • python判定文件目录是否存在及创建多层目录

    2022-08-12 09:39:03
  • python中dict获取关键字与值的实现

    2022-03-11 14:00:42
  • Linux 自动备份oracle数据库详解

    2023-07-14 08:11:41
  • Python数据结构与算法中的栈详解(2)

    2022-02-11 07:00:51
  • 使用Python制作自动推送微信消息提醒的备忘录功能

    2023-02-26 18:19:40
  • asp之家 网络编程 m.aspxhome.com