1. 程式人生 > >凸優化

凸優化

置信度 新的 wid borde tab 最小化 最大熵 logistic gist

機器學習中的大多數問題可以歸結為最優化問題。把一些典型的問題用最優化的方法建立數學模型,再最優化的方式求解。

我們再看看數據挖掘和機器學習中哪些是最優化問題,哪些不是。

名稱 是否最優化 其他
關聯規則 支持度和置信度;
其實就是聯合概率p(x,y)和條件概率p(y|x)。
典型的創造概念,但是沒有新的東西
決策樹 取信息增益大的結點
線性回歸 最小化誤差平方
最大熵 熵最大
logistic 回歸 最大似然
SVM 最小化間隔
HMM 最大似然
貝葉斯 最小化誤差
矩陣分解的推薦系統 用戶和商品的隱狀態向量

凸優化