详解pytorch的多GPU训练的两种方式

目录方法一：torch.nn.DataParallel1. 原理2. 常用的配套代码如下3. 优缺点方法二：torch.distributed1. 代码说明方法一：torch.nn.DataParallel