Python Sklearn 逻辑回归模型拟合不正确

     2023-03-12     192

关键词:

【中文标题】Python Sklearn 逻辑回归模型拟合不正确【英文标题】:Python Sklearn Logistic Regression Model Incorrect Fit 【发布时间】:2017-11-28 09:31:00 【问题描述】:

对于逻辑回归,我试图从 Wikipedia logistic regression 页面重现结果。所以,我的代码如下所示:

import numpy as np
from sklearn.linear_model import LogisticRegression

x = np.array([0.5, 0.75, 1, 1.25, 1.5, 1.75, 1.75, 2, 2.25, 2.5, 2.75, 3, 3.25, 3.5, 4, 4.25, 4.5, 4.75, 5, 5.5])
y = np.array([0, 0, 0, 0, 0, 0, 1, 0, 1, 0, 1, 0, 1, 0, 1, 1, 1, 1, 1, 1])

logistic = LogisticRegression()
logistic.fit(x[:, None], y)

但是如何获得拟合模型的摘要,具体如下:

            Coefficient  Std.Error  z-value  P-value (Wald)
Intercept   −4.0777      1.7610     −2.316    0.0206
Hours        1.5046      0.6287      2.393    0.0167

这是 Wikipedia 页面对拟合模型的内容。如果我尝试使用打印系数和截距,我会收到如下信息:

print(logistic.coef_)
print(logistic.intercept_)

[[ 0.61126347]]

[-1.36550178]

这显然是不同的。

问题是,为什么我的结果与在 Wikipedia 页面上获得的结果不同?

【问题讨论】:

【参考方案1】:

wikipedia 示例不包括模型参数上的正则化,但 sklearn 的LogisticRegression 默认使用 L2 正则化。 Set the inverse regularization strength, C, to a very high value to use no regularization,例如,

logistic = LogisticRegression(penalty='l2', C=1e4)
logistic.fit(x[:, None],y)

print(logistic.coef_)
print(logistic.intercept_)

# [[ 1.50459727]]
# [-4.07757136]

【讨论】:

【参考方案2】:

sklearn中不存在R类型总结报告。

对于分类任务,有一个函数:sklearn.metrics.classification_report,它计算几种类型的(预测)分数。

要获得 R 风格的摘要报告,请查看 statsmodels 库。

【讨论】:

sklearn Python 和逻辑回归

】sklearnPython和逻辑回归【英文标题】:sklearnPythonandLogisticregression【发布时间】:2016-03-0603:07:52【问题描述】:晚安,社区!我有一个简单的问题,答案可能不那么简单:如何使用Python的SciKitLearn显示逻辑回归模型的自变量系数... 查看详情

增加sklearn逻辑回归拟合能力的解决方案

...业。希望和大家一起成长进步。  本文主要介绍了增加sklearn逻辑回归拟合能力的解决方案,希望对新手有所帮助。文章目录1.问题描述2.解决方案2.1不建议的解决方案2.2推荐的解决方案1.问题描述  徒弟最近在做一个项目,... 查看详情

Python 中的逻辑回归和交叉验证(使用 sklearn)

】Python中的逻辑回归和交叉验证(使用sklearn)【英文标题】:Logisticregressionandcross-validationinPython(withsklearn)【发布时间】:2017-07-0710:45:04【问题描述】:我正在尝试通过逻辑回归解决给定数据集上的分类问题(这不是问题)。为... 查看详情

如何更新逻辑回归模型?

...更新(部分拟合)模型。有可能吗?【问题讨论】:一些Sklearn估计器实现了partial_fit方法。更多here.【参考方案1】:你不能在LogisticRegression上使用partial_fit。但你 查看详情

增加sklearn逻辑回归拟合能力的解决方案

...业。希望和大家一起成长进步。  本文主要介绍了增加sklearn逻辑回归拟合能力的解决方案,希望对新手有所帮助。文章目 查看详情

解释 sklearn 中的逻辑回归特征系数值

】解释sklearn中的逻辑回归特征系数值【英文标题】:Interpretinglogisticregressionfeaturecoefficientvaluesinsklearn【发布时间】:2018-12-0300:13:12【问题描述】:我已经为我的数据拟合了一个逻辑回归模型。想象一下,我有四个特征:1)参与... 查看详情

逻辑回归 sklearn - 训练和应用模型

】逻辑回归sklearn-训练和应用模型【英文标题】:Logisticregressionsklearn-trainandapplymodel【发布时间】:2018-05-0120:55:24【问题描述】:我是机器学习的新手,第一次尝试Sklearn。我有两个数据框,一个带有用于训练逻辑回归模型(具有1... 查看详情

使用 Python/Sklearn 创建和拟合乘法线性回归

】使用Python/Sklearn创建和拟合乘法线性回归【英文标题】:CreateandfitaMultiplicativelinearregressionusingPython/Sklearn【发布时间】:2013-04-2823:40:27【问题描述】:我正在使用Python2.7和Scikit-learn使用乘法线性回归拟合数据集,其中不同的项... 查看详情

python中正则化(逻辑?)回归模型中的概率建模

】python中正则化(逻辑?)回归模型中的概率建模【英文标题】:Modellingprobabilitiesinaregularized(logistic?)regressionmodelinpython【发布时间】:2016-02-2401:17:37【问题描述】:我想为概率拟合回归模型。我知道线性回归通常用于此目的,... 查看详情

如何在sklearn中获得逻辑回归模型的对数似然?

】如何在sklearn中获得逻辑回归模型的对数似然?【英文标题】:howtogettheloglikelihoodforalogisticregressionmodelinsklearn?【发布时间】:2018-06-1911:39:27【问题描述】:我在sklearn中使用逻辑回归模型,我有兴趣检索此类模型的对数似然性,... 查看详情

sklearn 逻辑回归中的特征选择

】sklearn逻辑回归中的特征选择【英文标题】:Featureselectionfromsklearnlogisitcregression【发布时间】:2018-02-2709:13:24【问题描述】:我使用sklearn逻辑回归模型为文本创建了一个二元分类模型。现在我想选择用于模型的特征。我的代码... 查看详情

逻辑回归模型中的内核 LogisticRegression scikit-learn sklearn

】逻辑回归模型中的内核LogisticRegressionscikit-learnsklearn【英文标题】:KernelinalogisticregressionmodelLogisticRegressionscikit-learnsklearn【发布时间】:2019-04-1110:53:47【问题描述】:如何使用sklearn库在逻辑回归模型中使用内核?logreg=LogisticRegr... 查看详情

Sklearn逻辑回归 - 调整截止点

】Sklearn逻辑回归-调整截止点【英文标题】:Sklearnlogisticregression-adjustcutoffpoint【发布时间】:2019-05-1916:36:57【问题描述】:我有一个逻辑回归模型试图预测以下两个类别之一:A或B。我的模型在预测A时的准确度约为85%。模型在预... 查看详情

在 sklearn 中使用交叉验证和 AUC-ROC 进行逻辑回归模型

】在sklearn中使用交叉验证和AUC-ROC进行逻辑回归模型【英文标题】:UsingcrossvalidationandAUC-ROCforalogisticregressionmodelinsklearn【发布时间】:2017-10-1714:03:12【问题描述】:我正在使用sklearn包构建逻辑回归模型,然后对其进行评估。具体... 查看详情

拟合 sklearn GridSearchCV 模型

】拟合sklearnGridSearchCV模型【英文标题】:FittingsklearnGridSearchCVmodel【发布时间】:2019-04-2605:20:27【问题描述】:我正在尝试在randomforestregressor的帮助下解决BostonDataset上的回归问题。我使用GridSearchCV来选择最佳超参数。问题1我是... 查看详情

为啥 auc 与 sklearn 和 R 的逻辑回归如此不同

】为啥auc与sklearn和R的逻辑回归如此不同【英文标题】:WhytheaucissodifferentfromlogisticregressionofsklearnandR为什么auc与sklearn和R的逻辑回归如此不同【发布时间】:2016-10-1818:12:21【问题描述】:我使用相同的数据集在R和pythonsklearn中训练... 查看详情

我无法将逻辑回归拟合到模型中。如何解决这个问题?

】我无法将逻辑回归拟合到模型中。如何解决这个问题?【英文标题】:Ican\'tfitLogisticRegressionintomodel.Howtosolvethis?【发布时间】:2021-10-2810:11:36【问题描述】:我在GoogleColab中运行了这段代码:fromsklearn.metricsimportconfusion_matrix#Initi... 查看详情

6.逻辑归回

1.用自己的话描述一下,什么是逻辑回归,与线性回归对比,有什么不同?逻辑回归(LogisticRegression)是用于处理因变量为分类变量的回归问题,常见的是二分类或二项分布问题,也可以处理多分类问题,它实际上是属于一种分... 查看详情