pytorch

pytorch mnist分类的损失函数选啥

小樊
83
2024-12-26 15:30:49
栏目: 深度学习

对于 PyTorch 中的 MNIST 分类任务,通常推荐使用交叉熵损失函数(Cross-Entropy Loss)。这是因为交叉熵损失函数在分类问题中表现良好,特别是在处理多类分类问题时。

以下是使用交叉熵损失函数的示例代码:

import torch
import torch.nn as nn
import torch.optim as optim

# 定义模型
class Net(nn.Module):
    def __init__(self):
        super(Net, self).__init__()
        self.fc1 = nn.Linear(28*28, 128)
        self.fc2 = nn.Linear(128, 64)
        self.fc3 = nn.Linear(64, 10)
        self.relu = nn.ReLU()
        self.dropout = nn.Dropout(0.5)
        
    def forward(self, x):
        x = self.relu(self.fc1(x))
        x = self.dropout(x)
        x = self.relu(self.fc2(x))
        x = self.dropout(x)
        x = self.fc3(x)
        return x

# 加载数据集
train_dataset = torchvision.datasets.MNIST(root='./data', train=True, download=True)
train_loader = torch.utils.data.DataLoader(train_dataset, batch_size=32, shuffle=True)

val_dataset = torchvision.datasets.MNIST(root='./data', train=False, download=True)
val_loader = torch.utils.data.DataLoader(val_dataset, batch_size=32, shuffle=False)

# 初始化模型、损失函数和优化器
model = Net()
criterion = nn.CrossEntropyLoss()
optimizer = optim.Adam(model.parameters(), lr=0.001)

# 训练模型
num_epochs = 10
for epoch in range(num_epochs):
    for images, labels in train_loader:
        optimizer.zero_grad()
        
        outputs = model(images)
        loss = criterion(outputs, labels)
        loss.backward()
        optimizer.step()
    
    print(f'Epoch [{epoch+1}/{num_epochs}], Loss: {loss.item():.4f}')

在这个示例中,我们使用了 PyTorch 的 nn.CrossEntropyLoss 类来实现交叉熵损失函数。这个损失函数会自动应用 softmax 操作,因此你不需要在模型的最后一层显式地添加 softmax 层。

0
看了该问题的人还看了