是否可以計算任何類型分類器的後驗概率？

Question

正如我所知，一些分類器如樸素貝葉斯計算數據的後驗概率並基於它產生結果。 我的問題是，任何分類器能產生後驗概率嗎？例如，決策樹如何生成它？

Answer 1

一些分類模型，如邏輯迴歸和神經網絡直接計算後驗類概率。基於生成模型的模型，例如二階判別式和從混合密度導出的模型，也計算後驗類概率。決策樹可以很容易地通過從樹的葉子返回正例的比例來輸出類概率。

一個突出的例外是支持向量機，它不返回概率。我認爲也許有人試圖修改它返回概率;不知道如何解決。

請參閱Hastie，Tibshirani和Friedman的「統計學習元素」（或許多文章中的任何一篇）以獲取更多關於這些內容的信息。這種類型的其他問題可能應該到stats.stackexchange.com。