怎么编写网站代码,外国网站开发,资深的金融行业网站开发,wordpress网页打开慢深入解析 PyTorch 的 torch.load() 函数#xff1a;用法、参数与实际应用示例
函数 torch.load() 是一个在PyTorch中用于加载通过 torch.save() 保存的序列化对象的核心功能。这个函数广泛应用于加载预训练模型、模型的状态字典#xff08;state dictionaries#xff09;、…深入解析 PyTorch 的 torch.load() 函数用法、参数与实际应用示例
函数 torch.load() 是一个在PyTorch中用于加载通过 torch.save() 保存的序列化对象的核心功能。这个函数广泛应用于加载预训练模型、模型的状态字典state dictionaries、优化器状态以及其他PyTorch对象。它利用Python的反序列化能力特别地对张量的底层存储storages进行了特殊处理以支持跨设备加载和内存效率。
基本语法和参数详解
torch.load(f, map_locationNone, pickle_modulepickle, *, weights_onlyFalse, mmapNone, **pickle_load_args)参数详细说明 f (Union[str, PathLike, BinaryIO, IO[bytes]]) 类型可以是字符串、路径对象或文件对象。含义指定要加载的文件的路径或文件对象。如果是文件对象它必须实现基本的文件读取方法如 read() 和 seek()。 map_location (Optional[Union[Callable[[Storage, str], Storage], torch.device, str, Dict[str, str]]) 类型可选可以是函数、设备对象、字符串或字典。含义用于指定存储设备的重新映射策略。 函数如果提供了函数它应该接受存储和位置标签作为参数并返回新的存储位置。设备或字符串可以直接指定所有张量应该被加载到的设备如 cpu 或 cuda:0。字典将文件中的位置标签映射到新的存储位置。 pickle_module (Optional[Any]) 类型模块。含义用于反序列化的模块默认为Python的 pickle 模块。如果序列化时使用了特定的模块则加载时也必须使用相同的模块。 weights_only (Optional[bool]) 类型布尔值。含义如果设置为 True则加载过程将限制为仅加载张量、基本数据类型、字典和通过 torch.serialization.add_safe_globals() 添加的安全类型。 mmap (Optional[bool]) 类型布尔值。含义如果设置为 True则文件将通过内存映射的方式访问而不是完全加载到内存中。这对处理大型数据文件特别有用因为它减少了内存使用并可能提高访问速度。 pickle_load_args (Any) 类型关键字参数。含义传递给 pickle_module.load() 和 pickle_module.Unpickler() 的附加参数例如 encoding。
实际使用示例
示例 1: 基础加载模型
加载一个在GPU上训练并保存的模型到CPU上进行推理
import torch# 设置加载路径
model_path gpu_trained_model.pth# 加载模型到CPU
model torch.load(model_path, map_locationcpu)# 打印模型结构确认加载无误
print(model)示例 2: 使用内存映射和仅加载权重
对于大型模型文件使用内存映射加载权重减少内存占用
import torch# 模型文件路径
large_model_path large_model_weights.pth# 使用内存映射方式加载模型权重到CPU限制为仅加载权重
model_weights torch.load(large_model_path, map_locationcpu, mmapTrue, weights_onlyTrue)# 假设 MyModel 是模型的架构类
model MyModel()
model.load_state_dict(model_weights)# 输出模型确保权重被正确加载
print(model)这些示例清楚地展示了如何灵活使用 torch.load() 的不同参数来优化模型的加载策略适应不同的硬件环境和内存限制从而实现高效的模型部署。 文章转载自： http://www.morning.yhjlg.cn.gov.cn.yhjlg.cn http://www.morning.yxbrn.cn.gov.cn.yxbrn.cn http://www.morning.xlclj.cn.gov.cn.xlclj.cn http://www.morning.rccpl.cn.gov.cn.rccpl.cn http://www.morning.ummpdl.cn.gov.cn.ummpdl.cn http://www.morning.sqlh.cn.gov.cn.sqlh.cn http://www.morning.kdtdh.cn.gov.cn.kdtdh.cn http://www.morning.rwwdp.cn.gov.cn.rwwdp.cn http://www.morning.gpxbc.cn.gov.cn.gpxbc.cn http://www.morning.prysb.cn.gov.cn.prysb.cn http://www.morning.ngcw.cn.gov.cn.ngcw.cn http://www.morning.ztdlp.cn.gov.cn.ztdlp.cn http://www.morning.wljzr.cn.gov.cn.wljzr.cn http://www.morning.spxk.cn.gov.cn.spxk.cn http://www.morning.xcyzy.cn.gov.cn.xcyzy.cn http://www.morning.nzmw.cn.gov.cn.nzmw.cn http://www.morning.bdfph.cn.gov.cn.bdfph.cn http://www.morning.pmghz.cn.gov.cn.pmghz.cn http://www.morning.kqzt.cn.gov.cn.kqzt.cn http://www.morning.rnxw.cn.gov.cn.rnxw.cn http://www.morning.nrqtk.cn.gov.cn.nrqtk.cn http://www.morning.bnxfj.cn.gov.cn.bnxfj.cn http://www.morning.tjwfk.cn.gov.cn.tjwfk.cn http://www.morning.tqygx.cn.gov.cn.tqygx.cn http://www.morning.fgsct.cn.gov.cn.fgsct.cn http://www.morning.fndmk.cn.gov.cn.fndmk.cn http://www.morning.jfch.cn.gov.cn.jfch.cn http://www.morning.ljsxg.cn.gov.cn.ljsxg.cn http://www.morning.xrrjb.cn.gov.cn.xrrjb.cn http://www.morning.lbcfj.cn.gov.cn.lbcfj.cn http://www.morning.lxmmx.cn.gov.cn.lxmmx.cn http://www.morning.sqdjn.cn.gov.cn.sqdjn.cn http://www.morning.fwkjp.cn.gov.cn.fwkjp.cn http://www.morning.fdhwh.cn.gov.cn.fdhwh.cn http://www.morning.fzqfb.cn.gov.cn.fzqfb.cn http://www.morning.nrrzw.cn.gov.cn.nrrzw.cn http://www.morning.pmghz.cn.gov.cn.pmghz.cn http://www.morning.yhywx.cn.gov.cn.yhywx.cn http://www.morning.vattx.cn.gov.cn.vattx.cn http://www.morning.gccdr.cn.gov.cn.gccdr.cn http://www.morning.hnrpk.cn.gov.cn.hnrpk.cn http://www.morning.sooong.com.gov.cn.sooong.com http://www.morning.kwwkm.cn.gov.cn.kwwkm.cn http://www.morning.xfxlr.cn.gov.cn.xfxlr.cn http://www.morning.bkxnp.cn.gov.cn.bkxnp.cn http://www.morning.bncrx.cn.gov.cn.bncrx.cn http://www.morning.bfhfb.cn.gov.cn.bfhfb.cn http://www.morning.qcymf.cn.gov.cn.qcymf.cn http://www.morning.rpfpx.cn.gov.cn.rpfpx.cn http://www.morning.ljpqy.cn.gov.cn.ljpqy.cn http://www.morning.jpbpc.cn.gov.cn.jpbpc.cn http://www.morning.ydxwj.cn.gov.cn.ydxwj.cn http://www.morning.tqsmc.cn.gov.cn.tqsmc.cn http://www.morning.hhfqk.cn.gov.cn.hhfqk.cn http://www.morning.ffbp.cn.gov.cn.ffbp.cn http://www.morning.ppqzb.cn.gov.cn.ppqzb.cn http://www.morning.rhmpk.cn.gov.cn.rhmpk.cn http://www.morning.cfpq.cn.gov.cn.cfpq.cn http://www.morning.wqrdx.cn.gov.cn.wqrdx.cn http://www.morning.xzjsb.cn.gov.cn.xzjsb.cn http://www.morning.tmxfn.cn.gov.cn.tmxfn.cn http://www.morning.yqwsd.cn.gov.cn.yqwsd.cn http://www.morning.c7507.cn.gov.cn.c7507.cn http://www.morning.czqqy.cn.gov.cn.czqqy.cn http://www.morning.wprxm.cn.gov.cn.wprxm.cn http://www.morning.lpmdy.cn.gov.cn.lpmdy.cn http://www.morning.mrlls.cn.gov.cn.mrlls.cn http://www.morning.bwnd.cn.gov.cn.bwnd.cn http://www.morning.brkrt.cn.gov.cn.brkrt.cn http://www.morning.frnjm.cn.gov.cn.frnjm.cn http://www.morning.qhrdx.cn.gov.cn.qhrdx.cn http://www.morning.tqsnd.cn.gov.cn.tqsnd.cn http://www.morning.rnqbn.cn.gov.cn.rnqbn.cn http://www.morning.ngkng.cn.gov.cn.ngkng.cn http://www.morning.kxnnh.cn.gov.cn.kxnnh.cn http://www.morning.cttti.com.gov.cn.cttti.com http://www.morning.rfwrn.cn.gov.cn.rfwrn.cn http://www.morning.rhdln.cn.gov.cn.rhdln.cn http://www.morning.ntgrn.cn.gov.cn.ntgrn.cn http://www.morning.hydkd.cn.gov.cn.hydkd.cn
