1. 程式人生 > >(二)貝葉斯和樸素貝葉斯

(二)貝葉斯和樸素貝葉斯

1、貝葉斯公式

P ( Y | X ) = P (
X | Y ) P ( Y ) P ( X
)

P ( Y , X )
= P ( Y | X ) P ( X ) = P ( X | Y ) P ( Y )
推導而來,其中 P(Y) 叫做 先驗概率, P(Y|X) 叫做 後驗概率, P(Y,X) 叫做 聯合概率。一般『先驗概率』、『後驗概率』是相對出現的,比如 P(Y) 與 P(Y|X) 是關於 Y 的先驗概率與後驗概率, P(X) 與 P(X|Y) 是關於 X 的先驗概率與後驗概率。

2、機器學習形式的貝葉斯公式

X 理解成“具有某特徵”, Y 理解成“類別標籤”。在最簡單的二分類問題下,我們將 Y 理解成“屬於某類”的標籤。於是貝葉斯公式就變形成了下面的樣子:

P ( | ) = P ( | ) P ( ) P ( )
解釋如下:
P ( | ) =
P ( | ) =