Unit 29. 邊寫邊理解 Logistic Regression （LR Model Part. 1）

Date

August 8, 2023

類型

正式課程

程度

高階中階

領域

資料科學機器學習/深度學習統計學與所需數學

時數警告：本單元居然講了 47 分鐘多 :D 然後還是分過 Part 的(

單元要先準備事項

建議看過 Unit 21. 機器學習超入門方法 - 一元線性回歸與評估指標
此單元有較多數學觀念，包含線性代數、微積分、統計學，其中有許多概念雖然會推導，但不會教詳細推導運算方法，未來有機會我們再出另外的課來補數學吧 QvQ 但現在不會推導完全也沒有關係，最重要是知道因果關係，其他交給電腦幫你算（

除非你的目標是演算法工程師，那就不一樣了
有些較頂尖的公司或職位確實會考推導過程 QAQ，我有附上一些資料，有需求者可以參考，並自己嘗試手動推導理解

單元重點

瞭解 Logistic Regression 的定義與推導
瞭解 Logistic Regression 與 Linear Regression 的差異
瞭解一堆未來要繼續學習機器學習的基本統計學概念與 Functions

所需套件

pip install numpy
pip install matplotlib
pip install seaborn
pip install scikit-learn

單元內容

Code（請配合影片內容教學食用）

（權限設定是使用報名時填寫的 email，單元推出當月有訂閱權限者才有權限，但影片內容有帶 coding 的部分，所以依舊能學到）

Embed Google Drive

數學與觀念筆記（幾乎等於這單元的原筆記版）

📝Logistic Regression Notes

Reference

【模型篇】逻辑回归（Logistic Regression）

概述逻辑回归是一个假设样本服从伯努利分布，利用极大似然估计和梯度下降求解的二分类模型，在分类、CTR预估领域有着广泛的应用。公式推导逻辑回归是用来解决分类问题用的，与线性回归不同的是，逻辑回归输出的不…

zhuanlan.zhihu.com

ithelp.ithome.com.tw

機器/統計學習: 羅吉斯回歸(Logistic regression)

線性回歸Review: 這邊假設有d個維度的資料 (統計上會說有d個隨機變量)， β是回歸係數(參數)。這邊的符號後面會一直沿用。

chih-sheng-huang821.medium.com

機器學習自學筆記06: Logistic regression

機器學習自學筆記06: Logistic regression 前一篇講到Classification 分類，今天就要來講Logistic regression ! 我們就從machine learning 的三個步驟開始吧! Three Steps of machine learning

wenwu53.com

Logistic classification with cross-entropy (1/2)

Description of the logistic function used to model binary classification problems. Contains derivations of the gradients used for optimizing any parameters with regards to the cross-entropy loss function.

peterroelants.github.io

机器学习笔记（四）：逻辑回归的多分类_ArchSummit_华为云开发者联盟_InfoQ精选文章

机器学习笔记（四）：逻辑回归的多分类

www.infoq.cn

从伯努利分布、极大似然估计到逻辑回归

这篇文章也是想弄清楚一些自己没搞清楚的概念，也希望能帮助到同样有需求的朋友。所有的统计学书籍都会从抛硬币试验开始讲起：随机变量 X=1 表示抛硬币正面朝上，设正面朝上的概率为 p ，那么随机变量 X 的概率质…

zhuanlan.zhihu.com