論文粗讀"Drug Similarity Integration Through Attentive Multi-view Graph Auto-Encoders"

Ma T, Xiao C, Zhou J, et al. Drug similarity integration through attentive multi-view graph auto-encoders[J]. arXiv preprint arXiv:1804.10850, 2018.

摘要相關(guān)

藥物相似相的研究對于支持下游的臨床任務(wù)抖剿,如從已知的特性推斷新藥物的副作用缚柳、適應(yīng)癥和相互作用有著很大的推進(jìn)。隨著新型藥物特征的日益普及雁乡,為學(xué)習(xí)更全面和準(zhǔn)確的相似性帶來了新的機(jī)會婚度。本文提出從多種類型的藥物特征中學(xué)習(xí)較為準(zhǔn)確和可解釋的相似性度量方法。具體來說,本文使用多視圖圖自動編碼器對集成進(jìn)行建模鼓蜒,并添加了注意機(jī)制來確定每個視圖對應(yīng)于相應(yīng)任務(wù)和特征的權(quán)重,以獲得更好的可解釋性。

  • 將藥物的每個特征看做一個視圖
  • 使用多視圖GAE來整合學(xué)習(xí)藥物的相似性
  • 對于單個視圖使用GCN編碼節(jié)點特征和邊
  • 視圖之間則使用基于注意力的選擇方案進(jìn)行非線性融合
模型淺析

本文以藥物的每個特征表示作為一個視圖都弹。給定視圖u \in \{1,\cdots,T\}娇豫,以每個藥物為節(jié)點,以兩節(jié)點之間的相似性作為邊畅厢》肓。可以得到每個視圖的節(jié)點特征嵌入表示Z^{(u)},以及樣本對之間的相似性A^{(u)}或详。給定T個不同的視圖系羞,多視圖相似性整合任務(wù)是在全視圖中得到統(tǒng)一的節(jié)點嵌入Z和相似性矩陣A \in R^{n \times n}

  • Similarity Integration with Attentive Multi-view Graph Autoencoders
    基礎(chǔ)的多視圖GraphCNN結(jié)構(gòu)
    給定視圖u霸琴,視圖的鄰接矩陣和對角陣定義如下:

    并使用兩層的GraphCNN來學(xué)習(xí)節(jié)點嵌入表示:
    對應(yīng)的權(quán)重矩陣椒振。對于得到的Z^{(u)},以拼接的方式得到新的節(jié)點表示Z梧乘。兩個節(jié)點之間的連接預(yù)測由sigmoid函數(shù)得到澎迎。
    相似矩陣的融合
    該融合的目的是得到一個多視圖統(tǒng)一的圖矩陣。
    步驟為:
    (1)對每個相似性矩陣A^u進(jìn)行標(biāo)準(zhǔn)化\hat{A}^u
    (2)鄰接矩陣整合\hat{A}=\frac{1}{T}\sum \alpha_u \hat{A}^u, \{\alpha_u\}是融合的權(quán)重选调。
    (3)使用一層GraphCNN去編碼圖中的節(jié)點
    (4)并將嵌入表示進(jìn)行解碼以重構(gòu)原始的輸入空間

    在沒有數(shù)據(jù)標(biāo)簽的情況下夹供,可以使用auto-encoder的重構(gòu)損失進(jìn)行約束
    在這種情況下,本文的框架可以看作是一種無監(jiān)督的多圖融合和嵌入方法仁堪。所導(dǎo)出的相似度矩陣\hat{A}也可以用于其他任務(wù)哮洽,如節(jié)點聚類。
    基于注意力的視圖選擇

    假設(shè)當(dāng)前視圖的鄰接矩陣為A^u弦聂,本文給每個視圖都分配一個注意力權(quán)重g^u \in R^{N \times N}鸟辅。整合后的鄰接矩陣表示為\sum_u g^u \odot A^u\odot是元素的對應(yīng)相乘莺葫。對于每個視圖匪凉,首先每個原始的鄰接矩陣被映射為一個非正則的矩陣g'^u=W^uA^u+b^u,然后對其進(jìn)行正則化得到g^u捺檬。為了降低計算的復(fù)雜度再层,本文將N \times N的鄰接矩陣替換為一個對角的注意力矩陣。具體來說堡纬,將g^u限制為一個向量聂受,并通過diag(g^u)?A^u形成加權(quán)相似度矩陣。
    進(jìn)一步的隐轩,將注意力權(quán)重進(jìn)行歸一化

    g^u=(g^u_1, \dots, g_N^u)被用于得到最后的相似性矩陣
    diag(g^u)是由其生成的對角矩陣饺饭。

  • A Semi-supervised Extension Given Partial Labeled Data
    由得到的Z進(jìn)行節(jié)點連接關(guān)系的預(yù)測,將標(biāo)簽數(shù)據(jù)應(yīng)用到模型的訓(xùn)練中:

    其中h(Z) =Softmax(W_hZ + b_h)
    為了進(jìn)一步在重構(gòu)的過程中也考慮圖的拉普拉斯正則职车,將前面L_{ed}替換為帶有權(quán)重的圖結(jié)構(gòu)正則瘫俊。表示為L_{lap}=\sum_{i,j}A_{i,j}||h(x_i)-h(x_j)||^2鹊杖,該目標(biāo)函數(shù)用GAE的重建損失取代了第二項,也顯式地建模了圖的結(jié)構(gòu)信息扛芽。


總的來說沒有新的操作骂蓖,可能也是因為這是18年的論文。但是想法很巧妙川尖,對A矩陣的操作可以更好的挖掘節(jié)點之間的連接關(guān)系登下。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市叮喳,隨后出現(xiàn)的幾起案子被芳,更是在濱河造成了極大的恐慌,老刑警劉巖馍悟,帶你破解...
    沈念sama閱讀 217,406評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件畔濒,死亡現(xiàn)場離奇詭異,居然都是意外死亡锣咒,警方通過查閱死者的電腦和手機(jī)侵状,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,732評論 3 393
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來毅整,“玉大人趣兄,你說我怎么就攤上這事〉考担” “怎么了艇潭?”我有些...
    開封第一講書人閱讀 163,711評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長戏蔑。 經(jīng)常有香客問我暴区,道長,這世上最難降的妖魔是什么辛臊? 我笑而不...
    開封第一講書人閱讀 58,380評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮房交,結(jié)果婚禮上彻舰,老公的妹妹穿的比我還像新娘。我一直安慰自己候味,他們只是感情好刃唤,可當(dāng)我...
    茶點故事閱讀 67,432評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著白群,像睡著了一般尚胞。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上帜慢,一...
    開封第一講書人閱讀 51,301評論 1 301
  • 那天,我揣著相機(jī)與錄音花枫,去河邊找鬼型酥。 笑死,一個胖子當(dāng)著我的面吹牛拜轨,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播允青,決...
    沈念sama閱讀 40,145評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼橄碾,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了颠锉?” 一聲冷哼從身側(cè)響起法牲,我...
    開封第一講書人閱讀 39,008評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎琼掠,沒想到半個月后拒垃,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,443評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡眉枕,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,649評論 3 334
  • 正文 我和宋清朗相戀三年恶复,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片速挑。...
    茶點故事閱讀 39,795評論 1 347
  • 序言:一個原本活蹦亂跳的男人離奇死亡谤牡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出姥宝,到底是詐尸還是另有隱情翅萤,我是刑警寧澤,帶...
    沈念sama閱讀 35,501評論 5 345
  • 正文 年R本政府宣布腊满,位于F島的核電站套么,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏碳蛋。R本人自食惡果不足惜胚泌,卻給世界環(huán)境...
    茶點故事閱讀 41,119評論 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望肃弟。 院中可真熱鬧玷室,春花似錦、人聲如沸笤受。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,731評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽箩兽。三九已至津肛,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間汗贫,已是汗流浹背身坐。 一陣腳步聲響...
    開封第一講書人閱讀 32,865評論 1 269
  • 我被黑心中介騙來泰國打工秸脱, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人掀亥。 一個月前我還...
    沈念sama閱讀 47,899評論 2 370
  • 正文 我出身青樓撞反,卻偏偏與公主長得像,于是被迫代替她去往敵國和親搪花。 傳聞我的和親對象是個殘疾皇子遏片,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,724評論 2 354

推薦閱讀更多精彩內(nèi)容