概述
- 首先得要了解本机有几张卡可以用：
nvidia-smi
- 模型用DataParallel包装一下：
device_ids = [1, 2, 3] # 可用GPU
model_t = torchvision.models.resnet152()
fc = model_t.fc.in_features
model_t.fc = nn.Linear(fc, len(df_dict))
model_t = torch.nn.DataParallel(model_t, device_ids=device_ids)
model_t = model_t.cuda(device=device_ids[0])
- 数据也指定设备：
imgs = data.cuda(device=device_ids[0])
label = label.cuda(device=device_ids[0])
最后
以上就是精明手链为你收集整理的pytorch进行单机多卡训练的全部内容，希望文章能够帮你解决pytorch进行单机多卡训练所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复