老饼|机器学习

算法原理

复现sklearn-线性回归
复现sklearn-岭回归
复现sklearn-Lasso回归

复现matlab-逻辑回归
复现matlab-决策树

复现sklearn-随机森林
复现sklearn-Adboost
复现sklearn-GBDT

复现libsvm-SVM模型
复现libsvm-SVM概率模型

复现sklearn-PCA
复现sklearn-LDA
复现sklearn-QDA
复现sklearn-FA

机器学习相关数学知识:
矩阵的运算与证明
函数最优值求解公式

本部分文章用于讲解sklearn内部是如何实现各个算法的,并自写代码重现与工具箱一模一样的效果
该部分内容是笔者阅读sklearn的源码后整理而成，与sklearn内部原理保持一致，用于满足希望了解算法内部原理的同学进行学习

线性回归、岭回归、Lasso回归

线性回归

【原理】线性回归原理老饼 2022-06-26

【代码】sklearn-实现线性回归老饼 2023-02-07

【代码】自写代码-实现线性回归老饼 2023-11-09

【拓展】线性回归中均方差的意义老饼 2022-08-11

线性回归

岭回归

【原理】岭回归模型介绍老饼 2022-06-26

【求解】岭回归的模型求解老饼 2023-11-09

【辨析】直观理解岭回归不能去掉无效变量老饼 2022-08-11

【流程】岭回归的实现流程老饼 2023-11-09

【代码】sklearn-实现岭回归老饼 2023-11-09

【代码】自写代码-实现岭回归老饼 2023-11-09

岭回归

Lasso回归

【原理】Lasso回归模型介绍老饼 2022-06-26

【求解】Lasso回归的求解算法老饼 2023-11-09

【推导】Lasso迭代公式推导老饼 2022-06-26

【代码】sklearn-实现Lasso回归老饼 2022-06-26

【代码】自写代码-实现Lasso回归老饼 2022-06-26

Lasso回归

线性模型泛谈

【辨析】线性回归、岭回归和Lasso的比较老饼 2022-06-26

【拓展】线性模型有阈值与无阈值的转化老饼 2022-08-08

线性模型泛谈