关键词：
逻辑回归，简单的说，就是用sigmoid函数把连续函数归一化转化成离散的几个可能的结果。
逻辑回归的算法
最大似然法： 我自己的理解，最大似然法就是在你观测到某一系列事件出现的可能性之后，倒推该事件最可能的概率，这个最可能的概率会使这一系列事件发生的可能性无限接近我们观测到的可能性。
梯度下降法
推荐看这些文章：
http://www.jianshu.com/p/1121509ac1dc
http://blog.csdn.net/zouxy09/article/details/8537620
http://blog.csdn.net/hjl240/article/details/52402912
http://blog.csdn.net/pakko/article/details/37878837
在实际使用的时候，可以直接调用sklearn里面的LogisticRegression
from sklearn import cross_validation from sklearn.linear_model import LogisticRegression #逻辑回归 #Initialize our algorithm alg=LogisticRegression(random_state=1) #Compute the accuracy score for all the cross validation folds.(much simpler than what we did before!) scores = cross_validation.cross_val_score(alg,titanic[predictors],titanic["Survived"],cv=3) #Take the mean of the scores (because we have one for each fold) print(scores.mean())
概率明显提升。
看一下其他数据的使用。
参考：http://blog.csdn.net/han_xiaoyang/article/details/49123419
为了防止像直线回归那样有过拟合的情况存在，可以在逻辑回归代价函数后面加上系数的惩罚项。
最后总结：并不想总当搬运工，但是感觉人家都写的好好的，能让人看懂就好，以后慢慢自己再写一份，羞愧的低下了我的头。
机器学习：逻辑回归
...*****注：本系列博客是博主学习Stanford大学AndrewNg教授的《机器学习》课程笔记。博主深感学过课程后，不进行总结非常easy遗忘，依据课程加上自己对不明确问题的补充遂有此系列博客。本系列博客包含线性回归、逻辑回归、神... 查看详情
机器学习——逻辑回归（logisticregression）
1前言 虽然该机器学习算法名字里面有“回归”，但是它其实是个分类算法。取名逻辑回归主要是因为是从线性回归转变而来的。 logistic回归，又叫对数几率回归。2logistic回归和线性回归的关系2.1线性回归模型 首先给... 查看详情
机器学习逻辑回归介绍
...辑回归的应用场景逻辑回归（LogisticRegression）是机器学习中的一种分类模型，逻辑回归是一种分类算法，虽然名字中带有回归。由于算法的简单和高效，在实际中应用非常广泛。广告点击率是否为垃圾邮件是... 查看详情
机器学习实战第五章logistic回归(代码片段)
defgradAscent(dataMatIn,classLabels):dataMatrix=mat(dataMatIn)#converttoNumPymatrixlabelMat=mat(classLabels).transpose()#converttoNumPymatrixm,n=shape(dataMatrix)alpha=0.001maxCycles=500weights=ones(( 查看详情
机器学习逻辑回归（logisticregression）
...了个大概，剩下的细节只能自己继续摸索。从本质上讲：机器学习就是一个模型对外界的刺激（训练样本）做出反应，趋利避害（评价标准）。 1.什么是逻辑回归？许多人对线性回归都比较熟悉，但知道逻辑回归的人可能就... 查看详情
斯坦福吴恩达教授机器学习公开课第五讲笔记——判别分析/高斯判别分析/gpa+逻辑回归/laplace平滑/极大似然的原理
机器学习——线性回归分类与逻辑回归
http://antkillerfarm.github.io/序这是根据AndrewNg的《机器学习讲义》，编写的系列blog。http://www.cnblogs.com/jerrylead/archive/2012/05/08/2489725.html这是网友jerrylead翻译整理的版本，也是本文的一个重要的参考。http://www.tcse.cn/~xulijie/这是jerrylea 查看详情
机器学习100天（十七）：017逻辑回归梯度下降
机器学习100天，今天讲的是：逻辑回归-梯度下降！在讲解了逻辑回归的基本原理和损失函数之后，我们来推导逻辑回归模型中参数w和b的梯度表达式。我们之前介绍过，计算逻辑回归的代价函数实际上包含了下面三个过程：Z=WTX+... 查看详情
机器学习100天（十七）：017逻辑回归梯度下降
机器学习100天，今天讲的是：逻辑回归-梯度下降！在讲解了逻辑回归的基本原理和损失函数之后，我们来推导逻辑回归模型中参数w和b的梯度表达式。我们之前介绍过，计算逻辑回归的代价函数实际上包含了下面三个过程：Z=WTX+... 查看详情
spark机器学习------逻辑回归
packageSpark_MLlibimportjavassist.bytecode.SignatureAttribute.ArrayTypeimportorg.apache.spark.sql.SparkSessionimportorg.apache.spark.ml.{Pipeline,PipelineModel}importorg.apache.spark.ml.classification 查看详情
[机器学习]--逻辑回归总结
逻辑回归是一个分类算法，它可以处理二元分类以及多元分类。虽然它名字里面有“回归”两个字，却不是一个回归算法。那为什么有“回归”这个误导性的词呢？个人认为，虽然逻辑回归是分类模型，但是它的原... 查看详情
机器学习：逻辑回归（ovr与ovo）(代码片段)
...对一的意思；改造方法不是指针对逻辑回归算法，而是在机器学习领域有通用性，所有二分类的机器学习算 查看详情
机器学习算法---逻辑回归及梯度下降
一、逻辑回归简介 logistic回归又称logistic回归分析，是一种广义的线性回归分析模型，常用于数据挖掘，疾病自动诊断，经济预测等领域。 logistic回归是一种广义线性回归（generalizedlinearmodel），因此与多重线性回归分析... 查看详情
机器学习逻辑回归logisticregression
文章内容均来自斯坦福大学的AndrewNg教授讲解的MachineLearning课程，本文是针对该课程的个人学习笔记，如有疏漏，请以原课程所讲述内容为准。感谢博主RachelZhang 的个人笔记，为我做个人学习笔记提供了很好的参考和榜样。&n... 查看详情
[机器学习]courseraml笔记-逻辑回归（logisticregression）
引言 机器学习栏目记录我在学习MachineLearning过程的一些心得笔记，涵盖线性回归、逻辑回归、Softmax回归、神经网络和SVM等等，主要学习资料来自StandfordAndrewNg老师在Coursera的教程以及UFLDLTutorial，StanfordCS231n等在线课... 查看详情
机器学习---逻辑回归（machinelearninglogisticregressionii）
在《机器学习---逻辑回归（一）（MachineLearningLogisticRegressionI）》一文中，我们讨论了如何用逻辑回归解决二分类问题以及逻辑回归算法的本质。现在来看一下多分类的情况。 现实中相对于二分类问题，我们更常遇到的是多... 查看详情
andrewng机器学习：逻辑回归
1.逻辑回归解决什么问题？逻辑回归用于分类问题。对于二分类问题，输入多个特征，输出为是或不是（也可以写作1或0）。逻辑回归就是这样一个用于分类的模型。2.什么是逻辑回归？逻辑回归建立在线性回归的基础上。首先，... 查看详情
机器学习——从线性回归到逻辑斯特回归
...行总结，其中图片多来自coursera课程上。线性回归是机器学习中很好理解的一种算法。我们以常见的房屋销售为例来进行简单分析：假设我们统计的一个房屋销售的数据如下：在此 查看详情