PyTorch高级教程：自定义模型、数据加载及设备间数据移动-Toy模板网

这篇具有很好参考价值的文章主要介绍了PyTorch高级教程：自定义模型、数据加载及设备间数据移动。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

在深入理解了PyTorch的核心组件之后，我们将进一步学习一些高级主题，包括如何自定义模型、加载自定义数据集，以及如何在设备（例如CPU和GPU）之间移动数据。

一、自定义模型

虽然PyTorch提供了许多预构建的模型层，但在某些情况下，你可能需要自定义模型层。这可以通过继承torch.nn.Module类并实现forward方法来实现：

import torch.nn as nn
import torch.nn.functional as F

class CustomModel(nn.Module):
    def __init__(self):
        super(CustomModel, self).__init__()
        self.conv1 = nn.Conv2d(3, 6, 5)
        self.pool = nn.MaxPool2d(2, 2)
        self.conv2 = nn.Conv2d(6, 16, 5)
        self.fc1 = nn.Linear(16 * 5 * 5, 120)
        self.fc2 = nn.Linear(120, 84)
        self.fc3 = nn.Linear(84, 10)

    def forward(self, x):
        x = self.pool(F.relu(self.conv1(x)))
        x = self.pool(F.relu(self.conv2(x)))
        x = x.view(-1, 16 * 5 * 5)
        x = F.relu(self.fc1(x))
        x = F.relu(self.fc2(x))
        x = self.fc3(x)
        return x

net = CustomModel()

二、自定义数据加载

PyTorch的DataLoader类使数据加载变得简单，但有时候你可能需要加载自定义的数据。你可以通过继承torch.utils.data.Dataset类并实现__getitem__和__len__方法来实现这个目标：

from torch.utils.data import Dataset

class CustomDataset(Dataset):
    def __init__(self, data, labels):
        self.data = data
        self.labels = labels

    def __getitem__(self, index):
        return self.data[index], self.labels[index]

    def __len__(self):
        return len(self.data)

三、设备间的数据移动

在PyTorch中，你可以通过将模型和数据移动到GPU上来加速训练。这可以通过调用.to方法实现：

device = torch.device("cuda:0" if torch.cuda.is_available() else "cpu")

# 确定我们在可用的设备上运行
net.to(device)

# 也可以将输入和目标值每次迭代时都移动到GPU上
inputs, labels = data[0].to(device), data[1].to(device)