論文不方便給出啦再芋,就是自己的一些學(xué)習(xí)記錄
主要內(nèi)容
論文提出了一個(gè)CT-AZND模型:使用了一個(gè)積分形式的誤差函數(shù)和兩次ZND公式网缝。
加的噪聲有以下幾種:常量诉植、線性時(shí)變、約束范圍隨機(jī)數(shù)铁坎。
解決問(wèn)題:主要是得到一個(gè)時(shí)變的非線性凸函數(shù)的最優(yōu)解(此時(shí)默認(rèn)只有一個(gè)全局最優(yōu)解)。
模型搭建過(guò)程
1犁苏、問(wèn)題公式:
其中硬萍,g表示步長(zhǎng)。這是為了離散化围详,因?yàn)橛?jì)算機(jī)中實(shí)際的計(jì)算是不可能連續(xù)的朴乖。步長(zhǎng)與計(jì)算時(shí)間有關(guān),不能說(shuō)步長(zhǎng)小于計(jì)算時(shí)間助赞。
2买羞、接下來(lái)對(duì)這個(gè)問(wèn)題公式求導(dǎo)(一開(kāi)始我們先對(duì)連續(xù)的進(jìn)行推導(dǎo))
3、然后得到一個(gè)導(dǎo)數(shù)為0的集合
可以得知雹食,最優(yōu)解處導(dǎo)數(shù)是一定為0的畜普。于是將當(dāng)做誤差函數(shù)。但是僅僅這樣考慮的是片面的群叶,于是對(duì)誤差函數(shù)做積分吃挑,這樣抗噪的性能會(huì)上升。
4街立、于是我們將當(dāng)做誤差函數(shù)舶衬。
5、然后使用ZND一階公式赎离,加上一個(gè)線性激活函數(shù)逛犹。
6、再次使用ZND一階公式蟹瘾,得到CT-AZND模型:
這里的H是Hessian矩陣
論文中對(duì)怎么從2次推導(dǎo)到CT-AZND做出了解釋圾浅,但沒(méi)太看懂。反正就是加上了就能保證有唯一解憾朴。
7狸捕、加上噪聲:
8、可以證明CT-AZND以誤差函數(shù)的判斷众雷,可以全局且指數(shù)級(jí)的收斂到理論解灸拍;可以證明加了常數(shù)級(jí)噪聲,模型的殘差可以收斂到0砾省;可以證明加了線性時(shí)變級(jí)噪聲鸡岗,模型的殘差是有界的且與成反比,當(dāng)足夠大時(shí)编兄,殘差是任意小的轩性;可以證明加了約束范圍隨機(jī)數(shù)級(jí)噪聲,模型的殘差是有界的且與成反比狠鸳,當(dāng)足夠大時(shí)揣苏,殘差是任意小的悯嗓。
證明過(guò)程是有的,寫(xiě)論文的時(shí)候去細(xì)看8卸察。
9脯厨、比較了一下CT-TZND模型。
10坑质、使用泰勒展開(kāi)合武,提出一個(gè)有限差分公式(4點(diǎn))離散化。
接下來(lái)就是說(shuō)明一下怎樣離散化并對(duì)比DT-TZND涡扼。
11稼跳、噪聲的選擇