1. 程式人生 > >機器學習/深度學習測試題(一) —— 單層感知器的啟用函式

機器學習/深度學習測試題(一) —— 單層感知器的啟用函式

問,更換單層感知器的啟用函式(比如改為 tanh 函式),能否使模型具有解決非線性分類問題的能力。

tanh(s)=exp(s)exp(s)exp(s)+exp(s)

可知,tanh 過原點,在 s>0 時,tanh>0s<0 時,tanh<0

單層感知器是否具有解決非線性問題的能力,在於判斷:

sgn(tanh(wx))>0tanh(wx)>0wx>0sgn(tanh(wx))>0tanh(wx)>0wx>0

也即 tanh (非線性函式)激勵函式的引入並未在解決非線性問題上帶來新的更強的能力。