in 统计学习原理

最近看到了Logistic 回归,LR模型主要用于分类模型(不是回归),细心的人不难发现LR模型在线性回归模型上加了一个sigmoid转换。sigmoid转换的优势求梯度方便数据统一分布在0-1之间,从下面的LR分布也可以看出算法定义$P(y=1\mid x)=\dfrac{e^{wx+b}}...

in 统计学习原理

感知机对应于输入空间中将实例划分为正负梁磊的分离超平面,属于判别模型。

in 统计学习原理NLP

携程笔试的时候碰到了这个题目,当时其实没多想。贝叶斯这个路子怕也太过气了吧... 携程也真是...

in 统计学习原理

笔记来自《统计学习方法》第四章。

in 统计学习原理

上一篇大概讲了一下拉格朗日对偶法以及KKT条件,这一篇推导一下SVM的公式。下一篇举个例子,差不多就结束了。线性可分支持向量机首先,考虑一下原始问题我们其实是想找出一个分割面来,把两个空间的元素一一分开。假设,这个分割面为:$$w^*·x+b^* = 0$$间隔间隔分为两种,函数间隔和几何间隔...