Papers about generating visual explanations

[1] Explanations based on the Missing: Towards Contrastive Explanations with Pertinent Negatives
這篇文章用提出了Contrastive Explanations with Pertinent Negatives庶骄,提供了一個(gè)解釋的新視角:這幅圖里面沒有什么,所以沒有被分錯(cuò)。不過這個(gè)之前在LISA的語義解釋里面講到過。這一次是visual explanation畅买。
作者將實(shí)驗(yàn)做在了minist數(shù)據(jù)集上馍佑。


實(shí)驗(yàn)圖

如圖所示,作者指出紅色的像素是pertiment negatives, 可以改變網(wǎng)絡(luò)的分類結(jié)果魄健。藍(lán)色像素是那些能夠盡量使網(wǎng)絡(luò)分類結(jié)果不變的像素虚婿。
[2] Generating Contrastive Explanations with Monotonic Attribute Functions
本篇是【1】的后續(xù)旋奢,因?yàn)椤?】只能做在minist這種binary的數(shù)據(jù)集上,對(duì)彩色圖像無力然痊。所以作者提出了一個(gè)概念: ''how to add pertiment negatives on color images.''
作者訓(xùn)練了N個(gè)attribute分類器黄绩,利用VAE改變圖像中某些超像素,如果超像素的改變導(dǎo)致attribute分類結(jié)果改變了玷过,就說明we add something to the image. 然后作者選出那些能夠改變盡量少的attribute分類結(jié)果但是使得圖像分類結(jié)果改變的超像素(有點(diǎn)繞),指出這些超像素就是Pertiment negatives.

對(duì)于Pertinent Positives筑煮,作者的想法和lime一樣辛蚊,找到盡量少的超像素,使其能夠?qū)е孪嗤姆诸惤Y(jié)果真仲。

【2】Anchors: High-Precision Model-Agnostic Explanations

3. Interpretability Beyond Feature Attribution:

Quantitative Testing with Concept Activation Vectors (TCAV)
-- Explain the model towards the effects of some important concepts, such as stripes to zebra.
-- Evaluate the method using images with a caption on the pixels. This is the ancestor of [1]

4. 【CVPR2019】Multimodal Explanations by Predicting Counterfactuality in Videos

利用attribute和bounding box對(duì)視頻分類進(jìn)行解釋袋马。
優(yōu)點(diǎn):生成的是visual+linguistic的解釋,利用了counterfactual, 即沒有被分到A類因?yàn)闆]有attriA秸应。
缺點(diǎn):使用了bounding box進(jìn)行框定虑凛,如果用的是自解釋的方法會(huì)更好碑宴。


Screen Shot 2019-09-09 at 9.23.24 AM.png

5. 【CVPR2019】Learning to Explain with Complemental Examples

和4同一個(gè)作者,唉桑谍,延柠,,锣披,贞间,
利用attributes解釋分類,同時(shí)選出counterfactual例子證明為什么不是另一類雹仿。


Screen Shot 2019-09-09 at 10.25.52 AM.png

6. 【CVPR2019】Attention Branch Network:Learning of Attention Mechanism for Visual Explanation

這篇文章將CAM和網(wǎng)絡(luò)結(jié)構(gòu)相結(jié)合增热,然后稱提高了分類準(zhǔn)確率。這就是高配版的戴威論文胧辽。峻仇。。
實(shí)驗(yàn)有三個(gè)邑商,cifar摄咆,ImageNet和face attribute prediction
這個(gè)face attribute prediction值得說一下,這個(gè)實(shí)驗(yàn)是做在面部屬性識(shí)別上的奠骄,而且面部圖片有

7. 【CVPR2019】Interpretable and Fine-Grained Visual Explanations for

Convolutional Neural Networks

方法與RISE類似豆同,利用含有兩種不同object的image進(jìn)行測試,確定模型定位的能力含鳞。
利用醫(yī)學(xué)圖像進(jìn)行測試影锈,確定模型定位的能力。
利用ImageNet做deletion實(shí)驗(yàn)蝉绷。

8. Real Time Image Saliency for Black Box Classifiers

NIPS2017

9. 綜述Techniques for Interpretable Machine Learning

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末鸭廷,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子熔吗,更是在濱河造成了極大的恐慌辆床,老刑警劉巖,帶你破解...
    沈念sama閱讀 212,816評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件桅狠,死亡現(xiàn)場離奇詭異讼载,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)中跌,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,729評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門咨堤,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人漩符,你說我怎么就攤上這事一喘。” “怎么了嗜暴?”我有些...
    開封第一講書人閱讀 158,300評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵凸克,是天一觀的道長议蟆。 經(jīng)常有香客問我,道長萎战,這世上最難降的妖魔是什么咐容? 我笑而不...
    開封第一講書人閱讀 56,780評(píng)論 1 285
  • 正文 為了忘掉前任,我火速辦了婚禮撞鹉,結(jié)果婚禮上疟丙,老公的妹妹穿的比我還像新娘。我一直安慰自己鸟雏,他們只是感情好享郊,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,890評(píng)論 6 385
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著孝鹊,像睡著了一般炊琉。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上又活,一...
    開封第一講書人閱讀 50,084評(píng)論 1 291
  • 那天苔咪,我揣著相機(jī)與錄音,去河邊找鬼柳骄。 笑死团赏,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的耐薯。 我是一名探鬼主播舔清,決...
    沈念sama閱讀 39,151評(píng)論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼曲初!你這毒婦竟也來了体谒?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,912評(píng)論 0 268
  • 序言:老撾萬榮一對(duì)情侶失蹤臼婆,失蹤者是張志新(化名)和其女友劉穎抒痒,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體颁褂,經(jīng)...
    沈念sama閱讀 44,355評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡故响,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,666評(píng)論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了颁独。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片彩届。...
    茶點(diǎn)故事閱讀 38,809評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖奖唯,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情糜值,我是刑警寧澤丰捷,帶...
    沈念sama閱讀 34,504評(píng)論 4 334
  • 正文 年R本政府宣布坯墨,位于F島的核電站,受9級(jí)特大地震影響病往,放射性物質(zhì)發(fā)生泄漏捣染。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,150評(píng)論 3 317
  • 文/蒙蒙 一停巷、第九天 我趴在偏房一處隱蔽的房頂上張望耍攘。 院中可真熱鬧,春花似錦畔勤、人聲如沸蕾各。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,882評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽式曲。三九已至,卻和暖如春缸榛,著一層夾襖步出監(jiān)牢的瞬間吝羞,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,121評(píng)論 1 267
  • 我被黑心中介騙來泰國打工内颗, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留钧排,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,628評(píng)論 2 362
  • 正文 我出身青樓均澳,卻偏偏與公主長得像恨溜,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子负懦,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,724評(píng)論 2 351

推薦閱讀更多精彩內(nèi)容