一、李進(jìn)-廣州大學(xué)-AI安全 1刨裆、信息系統(tǒng)安全三個屬性:完整性、可用性、機(jī)密性 AI攻擊主要考慮兩方面工作:逃逸攻擊佛吓、投毒攻擊(數(shù)據(jù)中毒攻擊)梦鉴。...
參考鏈接:http://www.reibang.com/p/22c50ded4cf7[http://www.reibang.com/p/22...
【總結(jié)】 當(dāng)數(shù)值過大或者過小時會導(dǎo)致數(shù)值問題隶糕; 常發(fā)生在深度模型中,因為其會對n個數(shù)累乘站玄。 合理的權(quán)重初始值和激活函數(shù)的選取可以提升數(shù)值穩(wěn)定性。...
https://blog.csdn.net/weixin_43398590/article/details/106911052[https://...
【總結(jié)】 權(quán)重衰退通過L2正則項使得模型參數(shù)不會過大濒旦,從而控制模型復(fù)雜度株旷。 正則項權(quán)重是控制模型復(fù)雜度的超參數(shù)。 丟棄法將一些輸出項隨機(jī)置0來控...
【總結(jié)】 訓(xùn)練數(shù)據(jù)集:訓(xùn)練模型參數(shù)晾剖; 驗證數(shù)據(jù)集:選擇模型超參數(shù)锉矢。 非大數(shù)據(jù)集上通常使用k-折交叉驗證。 模型容量需要匹配數(shù)據(jù)復(fù)雜度齿尽,否則可能導(dǎo)...
【總結(jié)】 感知機(jī)是一個二分類的問題沽损,是最早的AI模型之一。 它的求解算法等價于使用批量大小為1的梯度下降循头。 它不能擬合XOR函數(shù)绵估,導(dǎo)致第一次AI...
一、損失函數(shù) 損失函數(shù)卡骂,用來衡量預(yù)測值和真實值之間的區(qū)別国裳。 1、均方損失(L2 Loss) 橫坐標(biāo)應(yīng)該是y-y'全跨。藍(lán)色曲線是:真實值y不變時缝左,變...
【總結(jié)】 softmax是一個多類的分類問題。 使用softmax操作子得到每個類的預(yù)測置信度浓若。 使用交叉熵來衡量預(yù)測和標(biāo)號的區(qū)別渺杉。 1、回歸與...