- 首先得要了解本机有几张卡可以用：
nvidia-smi
- 模型用DataParallel包装一下：
device_ids = [1, 2, 3] # 可用GPU
model_t = torchvision.models.resnet152()
fc = model_t.fc.in_features
model_t.fc = nn.Linear(fc, len(df_dict))
model_t = torch.nn.DataParallel(model_t, device_ids=device_ids)
model_t = model_t.cuda(device=device_ids[0])
- 数据也指定设备：
imgs = data.cuda(device=device_ids[0])
label = label.cuda(device=device_ids[0])
最后
以上就是精明手链最近收集整理的关于pytorch进行单机多卡训练的全部内容，更多相关pytorch进行单机多卡训练内容请搜索靠谱客的其他文章。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复