Pytorch深度学习实践第六讲逻辑回归

最新推荐文章于 2025-03-26 21:26:16 发布

原创最新推荐文章于 2025-03-26 21:26:16 发布 · 486 阅读

2 ·

CC 4.0 BY-SA版权

pytorch学习专栏收录该内容

13 篇文章

订阅专栏

本文探讨了分类问题的本质，强调了计算类别概率的重要性，特别是介绍了逻辑回归模型。通过Sigmoid函数，将预测值映射到[0, 1]区间。文章详细阐述了Logistic函数的特性，并展示了二分类问题中，如何根据Sigmoid后的概率计算损失函数，以衡量预测的准确性。最后，提供了PyTorch中实现Sigmoid激活函数和二分类交叉熵损失函数的不同方法。" 127790766,13915590,图的邻接矩阵存储与度计算,"['算法', '数据结构', '图论', 'C++', 'C语言']

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

分类问题不是让“预测值”等于“类别”，而是计算属于每个类别的概率，要概率最大的。（将预测值通过Sigmoid函数从实数空间映射到[0，1]）

Logistic函数（仅仅是sigmiod函数中最典型的一种）：

x→+ $\infty$ ， $\sigma$ (x)→1;x→- $\infty$ ， $\sigma$ (x)→0;x=0, $\sigma$ (x)=1/2

计算图：

相比线性单元，Logistic回归单元后面多了一个Sigmiod激活函数。

二分类问题的损失函数：

y=1时，loss= $-y*log\hat{y}$ , $\hat{y}$ 越大，loss越小，预测越准确；

y=0时，loss=-log(1- $\hat{y}$ ) , $\hat{y}$ 越小，loss越小，预测越准确；

代码示例：

import torch.nn.functional as F
import torch
import numpy as np
import matplotlib.pyplot as plt

x_data = torch.Tensor([[1.0],[2.0],[3.0]])
y_data = torch.Tensor([[0],[0],[1]])

class LogisticRegressionModel(torch.nn.Module):
    def __init__(self):
        super(LogisticRegressionModel, self).__init__()
        self.linear = torch.nn.Linear(1, 1) #线性计算
    def forward(self, x):
        y_pred = F.sigmoid(self.linear(x))
        return y_pred
model = LogisticRegressionModel()

criterion = torch.nn.BCELoss(size_average=False) #求损失
optimizer = torch.optim.SGD(model.parameters(), lr=0.01) #优化

for epotch in range(1000):
    y_pred = model(x_data)
    loss = criterion(y_pred, y_data)
    print(epotch, loss.item())
    optimizer.zero_grad()
    loss.backward()
    optimizer.step()
x_test = torch.Tensor([[4.0]])
y_test = model(x_test)
print('y_pred=', y_test.data)
#下面是利用上面的模型进行预测
x = np.linspace(0, 10, 200) #从0-10生成200个样本点
x_t = torch.Tensor(x).view((200,1)) #将样本点变成200行1列的矩阵
y_t = model(x_t)
y = y_t.data.numpy() #得到list

plt.plot(x,y)
plt.plot([0,10], [0.5,0.5], c='r')
plt.xlabel('hours')
plt.ylabel('probability of pass')
plt.grid()
plt.show()

输出结果：